3f3e65bc6a8d5ff6f0e463a9c54982f14f3a5190
[pspp-builds.git] / src / ChangeLog
1 Thu Jan  6 18:48:58 WST 2005 John Darrington <john@darrington.wattle.id.au>
2
3         * main.c Added a signal handler for SIGFPE
4
5         * sort.c Somewhat more robust fix to the previous entry.
6
7 Wed Jan  5 21:23:31 2005  Ben Pfaff  <blp@gnu.org>
8
9         * sort.c: (merge) Fix assertion for proper Huffman merge pattern:
10         0 == 1 modulo 1.  See Knuth 5.4.9 (vol. 3, 2nd ed.,
11         pp. 361).  Thanks to John Darrington <john@cellform.com.au> for
12         reporting the bug.
13
14 Wed Jan  5 22:42:26 WST 2005 John Darrington <john@darrington.wattle.id.au>
15
16         * case.h Fixed bug # 11307
17         
18 Wed Jan  5 08:30:48 WST 2005 John Darrington <john@darrington.wattle.id.au>
19
20         * val-labs.c Fixed bug which caused a crash if VALUE LABELS had
21         a trailing slash.
22
23 Mon Jan  3 17:44:37 2005  Ben Pfaff  <blp@gnu.org>
24
25         * pfm-read.c: (read_variables) Remove direct manipulation of
26         v->aux, which is no longer needed.  Fixes Bug #11483.
27
28 Sat Jan  1 19:01:16 WST 2005 John Darrington <john@darrington.wattle.id.au>
29
30         * data-list.c Fixed a bug in parsing delimiters.
31
32         * group.c vars-atr.c Fixed buglet in hash/compare functions for alpha
33         values.
34
35         * percentiles.c Properly handled calculation of Tukey hinges where
36         the number of data is small.
37
38         * oneway.q Used the generic value_to_string function for independent
39         variable instead of trying to do it ourselves.
40
41         * box-whisker.c Fixed a buglet which caused a crash if the number of
42         data was zero
43
44
45 Fri Dec 31 16:47:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
46
47         * examine.q box-whisker.c chart.h Implemented boxplots in EXAMINE
48
49         * percentiles.c Fixed some bugs when calculating percentiles when
50         there's a small number of cases.
51
52 Wed Dec 29 08:18:08 WST 2004 John Darrington <john@darrington.wattle.id.au>
53
54         * percentiles.[ch] Added. Calculates percentiles and Tukey hinges
55
56         * examine.q factor_stats.[ch]  Added calculation of percentiles
57
58 Fri Dec 24 15:09:11 WST 2004 John Darrington <john@darrington.wattle.id.au>
59
60         * t-test.q Fixed bug #11227 Made t-test work when the independent
61         variable is alpha
62
63 Sat Dec 11 11:43:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
64
65         * factor_stats.c Fixed calculation of trimmed mean under various
66         special conditions.
67
68 Sat Dec  4 17:14:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
69
70         * histogram.c chart.[ch] factor_stats.c frequencies.q
71
72         Added code to calculate sensible histogram ranges and limits.
73
74 Thu Dec  2 13:37:43 WST 2004 John Darrington <john@darrington.wattle.id.au>
75
76         * chart.h Updated to reflect many API changes.
77
78         * cartesian.c chart.c Moved the definitions of chart_write_{xy}scale from 
79         cartesian.c and into chart.c
80
81         * factorstats.[ch] Added the histogram calculations
82
83         * casefile.c Removed an unused variable.
84
85         * frequencies.q examine.q histogram.c  Reworked the API for 
86         histograms.
87
88         * piechart.c  Revised the API for piecharts.
89
90         * var.h  Moved the definitions of freq_tab and freq out of var.h
91         and into frequencies.q where they belong.
92         
93 Tue Nov 30 21:10:20 2004  Ben Pfaff  <blp@gnu.org>
94
95         * flip.c: (flip_file) Check for off_t separately from fseeko(),
96         using AC_TYPE_OFF_T.
97
98 Tue Nov 30 08:47:41 2004  Ben Pfaff  <blp@gnu.org>
99
100         * flip.c: (flip_file) If fseeko() is not available, use long int
101         for off_t.  Thanks to "Marshall DeBerry" <mdb@radix.net> for
102         reporting the problem.
103
104 Mon Nov 29 12:20:59 WST 2004 John Darrington <john@darrington.wattle.id.au>
105
106         * examine.q factor_stats.[ch] Changed stderr to se_mean to avoid
107         conflict with stdio.
108
109 Sun Nov 21 10:32:41 WST 2004 John Darrington <john@darrington.wattle.id.au>
110
111         * var-labs.c (var_to_string) Now returns null if the variable is null
112
113         * value-labels.c (value_to_string) Made it return null if either the 
114         value or the variable is null.
115
116         * hash.c (hsh_clear) Fixed a buglet.
117
118         * examine.q  factor_stats.[ch] Largely  rewrote, because I'd started 
119         with  the wrong model.
120
121         * casefile.[ch] Added a function to return the casereader.case_idx 
122         member
123
124         * examine.q  Implemented the extreme values results.
125
126 John Darrington <john@darrington.wattle.id.au>
127
128         * settings.h set.c glob.[ch] frequencies.q q2c.c error.c lexer.[ch] 
129           output.[ch] getline.c 
130
131           Plugged some memory leaks
132
133 Mon Nov 15 23:47:40 2004  Ben Pfaff  <blp@gnu.org>
134
135         Adopt GSL random number generators, paving the way for providing
136         the complete suite of random number generators on expressions.
137         
138         * Makefile.am: Remove random.c, random.h.
139
140         * random.c: Removed.
141
142         * random.h: Removed.
143
144         * algorithm.c: (algo_default_random) Use GSL functions.
145
146         * casefile.c: (test_casefile) Use GSL RNG functions.
147
148         * expr-evl.c: (expr_evaluate) Use GSL RNG functions for OP_NORMAL,
149         OP_UNIFORM.
150
151         * sample.c: (cmd_sample) Use GSL RNG functions.
152         (sample_trns_proc) Ditto.
153
154         * set.q: (static var set_seed) Removed.
155         (static var seed_flag) Removed.
156         (static var rng) New variable.
157         (aux_stc_custom_seed) No seed value anymore, don't print anything.
158         (stc_custom_seed) Use new seed functions.
159         (seed_is_set) Removed.
160         (get_rng) New function that composes the entire external
161         interface.
162         (set_rng) New function.
163         (random_seed) New function.
164
165 Mon Nov 15 22:08:25 2004  Ben Pfaff  <blp@gnu.org>
166
167         * expr-evl.c: (expr_evaluate) Fix XDATE.JDAY formula.  Thanks to
168         John Darrington <john@darrington.wattle.id.au> for reporting this
169         bug.
170
171 Tue Nov 16 13:19:18 WST 2004 John Darrington <john@darrington.wattle.id.au>
172
173         * permissions.c command.def Added the PERMISSIONS command
174
175 Mon Nov 15 01:33:32 2004  Ben Pfaff  <blp@gnu.org>
176
177         * q2c.c: (dump_header) Don't try to emit #includes at very top of
178         output file because that will precede #include <config.h>, which
179         is bad.
180         (main) Add needed headers to /* (header) */ code.
181
182 Mon Nov 15 01:21:36 2004  Ben Pfaff  <blp@gnu.org>
183
184         Instead of making system or portable file readers responsible for
185         dropping and reordering variables, make them read full cases and
186         let the caller take care of any changes.
187
188         * get.c: New "case map" structure to handle this.  Use for GET,
189         IMPORT, MATCH FILES.  Essentially rewrite the whole file.
190
191         * pfm-read.c: (pfm_read_case) Read into provided case.  Signature
192         changed appropriately.
193
194         * sfm-read.c: (sfm_read_case) Ditto.
195
196 Mon Nov 15 00:47:45 2004  Ben Pfaff  <blp@gnu.org>
197
198         Decided that case_serialize() and case_unserialize() were too
199         abstract.  Also we need a couple more functions to avoid excessive
200         copying for data in/out fast paths.
201
202         * case.c: (case_serial_size) Removed.
203         (case_serialize) Rename case_to_values() and make its argument
204         explicitly an array of union values.
205         (case_unserialize) Rename case_from_values() and make its argument
206         explicitly an array of union values.
207         (case_data_all) New function.
208         (case_data_all_rw) New function.
209
210         * casefile.c: (struct casefile) Change buffer from array of
211         unsigned char to array of union value for better accuracy.
212         Redefine buffer_used and buffer_size in terms of values, not
213         bytes.  Remove case_size because it is now redundant with
214         value_cnt.  Fix up all references to these members.
215
216 Mon Nov 15 00:45:46 2004  Ben Pfaff  <blp@gnu.org>
217
218         * barchart.c: (struct subcat) Make `label' member const to silence
219         GCC warning with -Wwrite-strings.
220
221         * cartesian.c: (struct dataset) Ditto.
222
223         * case.c: Don't re-define NDEBUG if already defined.
224         Add lots of comments.
225
226         * str.c: Fix includes.
227
228         * crosstabs.q: Fix includes.
229
230         * examine.q: Fix includes.  Fix GCC warning about unused
231         variables.
232         
233         * frequencies.q: (stat macro) Removed and replaced where used by
234         its expansion.
235
236         * list.q: Fix includes.
237
238         * oneway.q: Fix includes.
239
240         * piechart.c: Fix includes.  Only define M_PI if not already
241         defined.
242
243         * sfm-read.c: (bswap) New function.
244         (bswap_int32) Write in terms of bswap.
245         (bswap_flt64) Ditto.
246
247         * str.c: (ds_data) Add external definition here, needed because
248         str.h has only an `extern inline' version.
249
250         * value-labels.c: Fix includes.
251
252 Mon Nov 15 00:40:55 2004  Ben Pfaff  <blp@gnu.org>
253
254         Instead of providing a system or portable file writer with a raw
255         case in the format needed for output, provide it with a regular
256         case.  The writer takes care of any needed translation.
257
258         * aggregate.c: Adopt new scheme for AGGREGATE.
259         (struct agr_proc) sfm_agr_case member removed.
260         (write_case_to_sfm) Removed because the new interface is easier to
261         use.
262
263         * get.c: Adopt new scheme for SAVE, XSAVE, EXPORT.
264
265         * pfm-write.c: Implement new scheme.
266
267         * sfm-write.c: Ditto.
268
269 Mon Nov 15 00:32:24 2004  Ben Pfaff  <blp@gnu.org>
270
271         Instead of treating `struct file_handle' as a class to subclass
272         into data files, system files, and portable files, instead use it
273         as a helper that coordinates access.  Now it is opaque, too.
274
275         This means that most references to a struct file_handle are now
276         changed into references to one of struct dfm_reader, struct
277         dfm_writer, struct sfm_reader, struct sfm_writer, struct
278         pfm_reader, or struct pfm_writer, according to what's being read
279         or written.
280
281         Most related changes are only worth summarizing briefly.
282
283         * dictionary.c: (dict_clear) Destroy aux data in deleted
284         variables.
285         (dict_clear_aux) New function.
286         (dict_create_var) Initialize aux, aux_dtor.
287         (dict_delete_var) Destroy aux data in deleted variable.
288
289         * file-handle.h: (struct fh_ext_class) Removed.
290         (struct file_handle) Removed.
291         (fh_init_files) Removed.
292
293         * file-handle.q: Changed references to a handle's `private' member
294         to direct references.
295         (struct private_file_handle) Renamed file_handle.
296         Add next, open_cnt, type, open_mode, aux members.
297         (struct file_handle_list) Removed.
298         (extern var inline_file) Removed.
299         (static var file_handles) Changed from file_handle_list * to
300         file_handle *.
301         (create_file_handle) Initialize new members.
302         (fh_close_handle) Removed.
303         (mode_name) New function.
304         (fh_open) New function.
305         (fh_close) New function.
306         (fh_parse_file_handle) Renamed fh_parse().
307
308         * glob.c: (init_glob) Remove fh_init_files() call.
309         
310         * aggregate.c: use sfm_writer.
311         (create_sysfile) Removed because the new interface is simpler.
312         
313         * apply-dict.c: Use sfm_reader.
314
315         * data-list.c: Use dfm_reader.
316
317         * file-type.c: Use dfm_reader.
318
319         * get.c: Use sfm_reader, sfm_writer, pfm_reader, pfm_writer.
320
321         * inpt-pgm.c: Use dfm_reader.
322
323         * print.c: Use dfm_writer.
324
325         * sysfile-info: Use sfm_reader.
326
327         * dfm-read.c: Adopt new file handle infrastructure.
328
329         * dfm-write.c: Ditto.
330
331         * pfm-read.c: Ditto.
332         
333         * pfm-write.c: Ditto.
334
335         * sfm-read.c: Ditto.
336
337         * sfm-write.c: Ditto.
338         
339 Mon Nov 15 00:31:44 2004  Ben Pfaff  <blp@gnu.org>
340
341         Break dictionary functions into separate header file.
342
343         * dictionary.h: New file.
344
345         * var.h: Moved dict_*() functions to dictionary.h.
346
347 Mon Nov 15 00:30:33 2004  Ben Pfaff  <blp@gnu.org>
348
349         Get rid of procedure-specific union in struct variable, using
350         instead a void * pointer and a destructor function.
351
352         Most related changes are only worth brief summaries.
353
354         * crosstabs.q: Fix includes.  Use new struct var_range in lieu of
355         old p.crs member in struct variable.
356         
357         * frequencies.q: Fix includes.  Use new struct var_freqs in lieu
358         of old p.frq member in struct variable.
359
360         * histogram.c: (draw_histogram) Takes new freq_tab arg because
361         it's no longer possible to grab this from var->p.frq.
362
363         * piechart.c: (draw_piechart) Ditto.
364
365         * group.c: (group_proc_get) New function.
366
367         * levene.c: Use group_proc_get() in lieu of old p.grp_data member
368         in struct variable.
369
370         * oneway.q: Ditto.
371
372         * t-test.q: Ditto.
373
374         * main.c: (execute_command) Clear aux data in default_dict after
375         each command.  (It's debatable whether this should be done.)
376
377         * matrix-data.c: Use new struct mxd_var in lieu of old p.mxd
378         member in struct variable.
379
380         * means.q: Get rid of integer mode, which is not included in
381         recent SPSS and was the only code that wanted per-variable private
382         data.
383
384         * var.h: (struct crosstab_proc) Removed.
385         (struct frequencies_proc) Removed.
386         (struct list_proc) Removed.
387         (struct get_proc) Removed.
388         (struct means_proc) Removed.
389         (struct matrix_data_proc) Removed.
390         (struct match_files_proc) Removed.
391         (lots of enums) Removed.
392         (struct variable) Removed members `p', `get'.  Add member
393         `aux_dtor'.
394
395         * vars-atr.c: (var_attach_aux) New function.
396         (var_detach_aux) New function.
397         (var_clear_aux) New function.
398         (var_dtor_free) New function.
399         (discard_variables) Use NULL instead of inline_file.
400
401 Fri Nov 12 10:07:11 WST 2004 John Darrington <john@darrington.wattle.id.au>
402
403         * value-labs.c  Fixed the implmentation of value_to_string, so 
404         that it properly handles alpha values.
405
406         * oneway.q  Changed instances where labels were being probed manually, 
407         to use the canonical {var,value}_to_string functions
408
409 Thu Nov 11 21:01:31 WST 2004 John Darrington <john@darrington.wattle.id.au>
410
411         * examine.q cartesian.c chart.[ch]   Added normal and detrended normal
412         plots.  Changed the API of the cartesian plot to be a much lower level
413         thing.
414
415 Sun Nov  7 17:25:04 WST 2004 John Darrington <john@darrington.wattle.id.au>
416
417         * examine.q Added some of the parametric calculations
418
419         * factor_stats.[ch]  Created
420         
421 Sat Nov  6 21:24:31 WST 2004 John Darrington <john@darrington.wattle.id.au>
422
423         * examine.q  Changed the definition of factors to be a composite, and
424         dealt with the consequences.
425
426 Sat Nov  6 20:40:38 WST 2004 John Darrington <john@darrington.wattle.id.au>
427
428         * examine.q Fixed problem where examine wasn't dealing properly with 
429         splits
430
431 Sat Nov  6 14:49:47 WST 2004 John Darrington <john@darrington.wattle.id.au>
432
433         * oneway.q Fixed problem where oneway wasn't dealing properly with 
434         splits
435
436 Thu Nov  4 11:09:01 WST 2004 John Darrington <john@darrington.wattle.id.au>
437
438         * q2c.c examine.q  Fixed a bug (feature?) whereby arrays in the
439         command which had settings didn't get the appropriate code
440         generated.
441
442         * val.h value-labels.[ch] var-labs.c Added v*to_string functions
443         to convert variables/values to strings.
444
445         * examine.q  Added framework for the EXAMINE command.
446
447 Mon Nov  1 12:46:17 WST 2004 John Darrington <john@darrington.wattle.id.au>
448
449         * q2c.c frequencies.q set.q t-test.q  Fixed the q2c parsing of DBL 
450         subcommand types.  Changed frequencies.q to use it rather then the 
451         custom parser.  Dealt with the consequences.  Added a test for NTILES
452         subcommand of frequencies.
453
454 Sat Oct 30 09:16:29 WST 2004 John Darrington <john@darrington.wattle.id.au>
455
456         * oneway.q   Fixed up the behaviour when given missing values
457
458         * levene.c oneway.q Fixed a buglet with the levene statistic and
459         incorporated the levene test into the oneway command.
460
461         * group.h  t-test.q  Moved the CMP_EQ and CMP_LE symbols out of 
462         global scope, since they're only relevant to T-TEST
463
464 Fri Oct 29 17:39:03 WST 2004 John Darrington <john@darrington.wattle.id.au>
465
466         * group.c group.h group_proc.h levene.c oneway.q t-test.q
467
468         Made the t-test more consistent
469         with the way it handles groups.  That is, it now uses a hash instead
470         of an array of 2.  Also, made the levene.c file independent of the 
471         implementation of the t-test.  So now levene should be fine for both
472         t-test and anova.
473
474         * Added an oneway.q file for one way anova
475
476 Wed Jun  2 22:08:02 2004  Ben Pfaff  <blp@gnu.org>
477
478         * descript.c: (cmd_descriptives) Remove harmless but bogus test in
479         STATISTICS parsing.
480
481 Mon May 31 20:45:24 2004  Ben Pfaff  <blp@gnu.org>
482
483         Fix memory leaks.
484
485         * data-list.c: (cmd_data_list) Free dls->delims on lossage.
486         (data_list_trns_free) Free dls->delims.
487
488         * t-test.q: (tts_custom_pairs) Free vars.
489         (ssbox_one_sample_init) Fix tab_vline() argument.
490         (ssbox_independent_samples_init) Ditto.
491         (trbox_paired_init) Ditto.
492         (trbox_one_sample_init) Ditto.
493
494 Mon May 31 17:19:27 2004  Ben Pfaff  <blp@gnu.org>
495
496         Generalize casefiles to the extent that we can use them for
497         sorting and other kinds of data transformations.  Change cases to
498         be copy-on-write to improve memory efficiency in common cases.
499         Every access to a member of a `struct ccase' was changed to be a
500         call to a case_*() function, especially case_data(), case_num(),
501         case_str(), or case_data_rw().  Many instances of a local variable
502         named "case_num" were changed to "case_idx" as a consequence.
503         Many `struct ccase *' were changed to actual `struct ccase'
504         because of copying semantics of cases.  In several places there
505         was a choice between updating debug code to work with the new ADTs
506         or just deleting it because it was useless; I chose to delete it.
507  
508         * Makefile.am: (pspp_SOURCES) Add case.c, case.h.
509
510         * case.c: New file.
511
512         * case.h: New file.
513
514         * aggregate.c: (struct agr_proc) Change type of `sort' to
515         sort_criteria *.  Add `break_vars', `break_var_cnt' members.
516         Rename `vars' to `agr_vars', all references updated.  Change
517         `agr_case' to type `struct ccase'.
518         (cmd_aggregate) Deal with new members.  Use case_create(),
519         sort_active_file_in_place(), sort_active_file_to_casefile().
520         (agr_destroy) Deal with new members.
521         (aggregate_single_case) Ditto.
522         (dump_aggregate_info) Ditto.
523         (initialize_aggregate_info) Ditto.
524         (agr_to_active_file) Ditto.
525         (presorted_agr_to_sysfile) Ditto.
526         (sort_agr_to_sysfile) Removed.
527
528         * alloc.c: (out_of_memory) Make non-static.
529
530         * alloc.h: Prototype out_of_memory().
531
532         * casefile.c: Switched from a linked list in-memory representation
533         to a two-level array-style representation.  The linked list was
534         appropriate when we could stick a header onto cases, but that's no
535         longer the case.  Also, the two-level array will allow for random
536         in-memory access in case that's ever wanted.  Also added the
537         concept of a `destructive casereader', one that destroys cases in
538         the underlying casefile as they are read out.
539         (macro CASES_PER_BLOCK) New macro.
540         (struct casefile) New members `value_cnt', `case_list_size',
541         `case_acct_size', `being_destroyed', `cases'.  Removed `head',
542         `tail'.
543         (struct casereader) Removed `cur'.  Added `destructive', `c'.
544         (global var casefiles) Made static.
545         (static var case_bytes) New var.
546         (casefile_create) Takes a value count, not a case size in bytes,
547         to conform to the case interface.  All callers updated.  Deal with
548         new and removed members.
549         (casefile_destroy) Deal with new and removed members.
550         (casefile_sleep) New function.
551         (casefile_get_case_size) Removed.
552         (casefile_get_value_cnt) New function.
553         (casefile_append) Rewritten to deal with new and removed members.
554         (casefile_append_xfer) New function.
555         (write_case_to_disk) Use case_serialize().
556         (call_posix_fadvise) Removed because posix_fadvise64 segfaults.
557         Couldn't figure out why.
558         (casefile_to_disk) Don't call call_posix_fadvise.  Rewritten to
559         deal with new and removed members.
560         (merge) Removed.
561         (merge_sort) Removed.
562         (casefile_sort) Removed.
563         (casefile_get_reader) Deal with new and removed members.
564         (casefile_get_destructive_reader) New function.
565         (reader_open_file) Make code more readable.  Create case for
566         reader.
567         (casereader_get_casefile) New function.
568         (casereader_read) Deal with new and removed members.  Now returns
569         a copy of the case, so that the caller is responsible for
570         destroying the returned case.
571         (casereader_read_xfer) New function.
572         (casereader_destroy) Destroy reader's case.
573         (test_casefile) Second arg is now a value count, all callers
574         updated.  Now tests destructive readers too.
575         (get_random_case) Deal with new case ADT.
576         (write_random_case) Ditto.
577         (read_and_verify_random_case) Ditto.
578
579         * crosstabs.q: Remove debug code.
580
581         * descript.q: (calc_descriptives) Deal with new case, casefile
582         ADTs.
583
584         * dfm.c: (cmd_begin_data) There's no storage_source_class anymore.
585
586         * do-if.c: Remove unneeded header inclusion.
587
588         * expr-prs.c: Remove debug code.
589
590         * exprP.h: Remove debug code.
591
592         * flip.c: (flip_file) Use fseeko() if available.
593
594         * formats.c: Remove debug code.
595
596         * get.c: Remove debug code.
597         (struct mtf_file) Change `input' from `union value *' to `struct
598         ccase', all references updated.
599
600         * levene.c: (levene) Deal with new case, casefile ADTs.
601
602         * list.q: Remove debug code.
603
604         * loop.c: Remove debug code.
605         
606         * matrix-data.c: Remove debug code.
607
608         * means.q: Remove debug code.
609
610         * mis-val.c: Remove debug code.
611
612         * pfm-read.c: Remove debug code.
613         (pfm_read_code) Change second arg from `union value *' to `struct
614         ccase *', all references updated.
615
616         * recode.c: (string_to_long) Make first arg const.
617         (convert_to_double) Ditto.
618
619         * repeat.c: Remove debug code.
620
621         * sample.c: Remove debug code.
622
623         * sfm-read.c: Remove debug code.
624         (sfm_read_case) Change second arg from `union value *' to `struct
625         ccase *'.
626
627         * sort.c: Redone in terms of casefiles.
628         (enum sort_direction) Moved here from sort.h.
629         (struct sort_criterion) New structure.
630         (struct sort_criteria) New structure.
631         (cmd_sort_cases) Rewritten.
632         (prepare_to_sort_active_file) New function.
633         (sort_active_file_in_place) New function.
634         (sort_active_file_to_casefile) New function.
635         (parse_sort) Renamed sort_parse_criteria(), rewritten & interface
636         changed, all callers updated.
637         (destroy_sort_cases_pgm) Renamed sort_destroy_criteria(),
638         rewritten & interface changed, all callers updated.
639         (sort_cases) Renamed sort_execute(), rewritten & interface
640         changed, all callers updated.
641         (struct internal_sort) Removed.
642         (do_internal_sort) Rewritten, interface changed.
643         (destroy_internal_sort) Removed.
644         (compare_case_dblptrs) Use sort_criteria instead of sort_case_pgm.
645         (struct initial_run) Removed; an initial run is now just a
646         casefile.
647         (compare_initial_runs) Rewritten.
648         (struct external_sort) Changed almost completely.
649         (do_external_sort) Rewritten, interface changed.
650         (destroy_external_sort) Rewritten.
651         [HAVE_MKDTEMP] (make_temp_dir) Removed.
652         [!HAVE_MKDTEMP] (do_mkdir) Removed.
653         [!HAVE_MKDTEMP] (make_temp_dir) Removed.
654         (init_external_sort) Removed.
655         (simulate_error) Removed.
656         (rmdir_temp_dir) Removed.
657         (get_temp_file_name) Removed.
658         (open_temp_file) Removed.
659         (close_temp_file) Removed.
660         (remove_temp_file) Removed.
661         (write_temp_file) Removed.
662         (read_temp_file) Removed.
663         (struct record_run) Change `record' from `struct case_lit *' to
664         `struct ccase'.
665         (struct initial_run_state) Remove `idx_to_fv', `free_list',
666         `file_idx', `output_file'.  Add `run', casefile'.  Change
667         `last_output' from `struct case_list *' to `struct ccase'.
668         (write_initial_runs) Change interface, rewrite.
669         (sort_sink_write) Renamed process_case(), changed interfaced,
670         rewrote.
671         (destroy_initial_run_state) Rewritten.
672         (allocate_cases) Rewritten.
673         (compare_record) Interface changed, rewritten.
674         (start_run) Rewritten.
675         (end_run) Rewritten.
676         (output_record) Rewritten.
677         (grab_case) Removed.
678         (release_case) Removed.
679         (struct merge_case) Change `cases' from double pointer to single
680         pointer.
681         (merge) Deal with new case and casefile ADTs.
682         (struct run) Removed.
683         (merge_once) Rewritten, interface changed.
684         (fill_run_buffer) Removed.
685         (sort_sink_make_source) Removed.
686         (sort_sink_class) Removed.
687         (struct sort_source_aux) Removed.
688         (sort_source_read_helper) Removed.
689         (sort_source_read) Removed.
690         (read_sort_output) Removed.
691         (read_internal_sort_output) Removed.
692         (read_external_sort_output) Removed.
693         (sort_source_destroy) Removed.
694         (sort_source_class) Removed.
695
696         * sort.h: (struct sort_cases_pgm) Removed.
697         (enum sort_direction) Moved to sort.c.
698
699         * t-test.q: (calculate) Deal with new case, casefile ADTs.
700
701         * tab.c: Remove debug code.
702
703         * var-labs.c: Remove debug code.
704
705         * var.h: (struct ccase) Removed.
706         (struct case_list) Removed.
707
708         * vars-atr.c: (discard_variables) Use free_case_source().
709
710         * vars-prs.c: (parse_vs_variable) Make arg const.
711         (parse_dict_variable) Ditto.
712         (parse_variables) Make struct dictionary * arg const.
713         (parse_var_set_vars) Make struct var_set * arg const.
714         (struct var_set) Add const to some of the function pointers' args.
715         (var_set_get_cnt) Make arg const.
716         (var_set_get_var) Make first arg const.
717         (var_set_lookup_var) Make first arg const.
718         (dict_var_set_get_cnt) Make arg const.
719         (dict_var_set_get_var) Make first arg const.
720         (dict_var_set_lookup_var) Make first arg const.
721         (var_set_create_from_dict) Make arg const.  Add cast to aux
722         assignment.
723         (struct array_var_set) Add const to var member.
724         (array_var_set_get_cnt) Make arg const.
725         (array_var_set_get_var) Make first arg const.
726         (array_var_set_lookup_var) Make first arg const.
727         (var_set_create_from_array) Make first arg const.  Insert cast.
728
729         * vfm.c: (struct write_case_data) Change trns_case, sink_case
730         members from `struct ccase *' to `struct ccase'.
731         (static var lag_queue) Change from double to single pointer.
732         (procedure) Optimize trivial case.
733         (internal_procedure) Deal with changed case, case_source ADTs.
734         (create_trns_case) Changed interface, rewrote.
735         (open_active_interface) Initialize modified lag queue.
736         (write_case) Deal with changed case ADT.
737         (lag_case) Deal with modified lag queue.
738         (close_active_file) Destroy modified lag queue.
739         Deal with changed case_source, case_sink ADTs.
740         (destroy_storage_stream_info) Make null arg into no-op.
741         (storage_sink_make_source) Set aux in created source.
742         (storage_source_read) Deal with changed case, casefile ADTs.
743         (storage_source_create) New function.
744         (lagged_case) Rewrite.
745         (free_case_source) New function.
746         (free_case_sink) Rewrite.
747         (struct split_aux_data) Changed prev_case from `struct ccase *' to
748         `struct ccase'.
749         (procedure_with_splits) Deal with changed prev_case.
750         (procedure_with_splits_callback) Ditto.
751         (multipass_split_aux_data) Changed prev_case from `struct ccase *' to
752         `struct ccase'.
753         (multipass_procedure_with_splits) Deal with changed prev_case.
754         (multipass_split_callback) Ditto.
755         
756         
757 Mon May 31 17:19:06 2004  Ben Pfaff  <blp@gnu.org>
758
759         The workspace idea didn't work out.
760
761         * Makefile.am: (pspp_SOURCES) Remove workspace.c, workspace.h.
762         
763         * workspace.c: Removed.
764
765         * workspace.h: Removed.
766
767 Sun May 30 18:35:19 2004  Ben Pfaff  <blp@gnu.org>
768
769         Fully implement arbitrary delimiters on DATA LIST, extending the
770         half implementation that was already there.
771
772         * data-list.c: (struct data_list_pgm) Remove `delim', add
773         `delims', `delim_cnt'.
774         (cmd_data_list) Initialize new members.  Parse delimiters and
775         clean up code a bit.
776         (cut_field) Extract fields with arbitrary delimiters.  Also, fix
777         handling of leading commas.
778         (read_from_data_list_fixed) Expand tabs.  Adapt to new DFM
779         interfaces.
780         (read_from_data_list_free) Adapt to new DFM interfaces.
781         (read_from_data_list_list) Ditto.
782         (repeating_data_trns_proc) Ditto.
783
784         * dfm.c: Split up reader and writer into separate code, because
785         they do different things.  Use struct string instead of explicit
786         allocation code, for clarity.
787         (enum dfm_reader_flags) New enum.
788         (struct dfm_fhuser_ext) Removed.
789         (struct dfm_reader_ext) New.
790         (get_reader) New function, used by just about all the reader
791         functions.
792         (dfm_close) Removed.
793         (close_reader) New function.
794         (dfm_open_for_reading) Rewrite initialization of dfm_fhuser_ext.
795         (dfm_open_for_writing) Ditto.
796         (macro force_line_buffer_expansion) Removed.
797         (count_tabs) Removed.
798         (tabs_to_spaces) Removed.
799         (read_record) Deal with new dfm_reader_ext.  Use struct string
800         functions.  Don't convert tabs to spaces.
801         (dfm_eof) New function.
802         (dfm_get_record) Changed interface, rewrote.
803         (dfm_expand_tabs) New function.
804         (dfm_fwd_record) Renamed dfm_forward_record(), updated to new
805         dfm_reader_ext, rewritten.
806         (dfm_bkwd_record) Renamed dfm_reread_record(), updated to new
807         dfm_reader_ext, rewritten.
808         (dfm_set_record) Removed in favor of dfm_forward_columns().
809         (dfm_forward_columns) New function.
810         (dfm_get_cur_col) Renamed dfm_column_start, updated to new
811         dfm_reader_ext, rewritten.
812         (static var dfm_r_class) Use close_reader for the destructor.
813         (struct dfm_writer_ext) New.
814         (dfm_put_record) Updated to new dfm_writer_ext, rewritten.  Uses
815         bounce buffer now instead of local allocation.
816         (close_writer) New function.
817         (static var dfm_writer_ext) Use close_writer for destructor.
818         (cmd_begin_data) Adapt to new dfm_reader_ext.
819
820         * file-handle.q: Add support for per-file tab width.
821         (struct private_file_handle) Add tab_width member.
822         (q2c specifications) Add tabwidth subcommand.
823         (cmd_file_handle) Put parsed tab width into private_file_handle.
824         (create_file_handle) Set default tab width.
825         (handle_get_tab_width) New function.
826
827         * file-type.c: (file_type_source_read) Adapt to new DFM interface.
828
829         * inpt-pgm.c: (reread_trns_proc) Ditto.
830
831         * matrix-data.c: (context) Ditto.
832         (another_token) Ditto.
833         (mget_token) Ditto.
834         (force_eol) Ditto.
835
836 Sun May 30 18:33:59 2004  Ben Pfaff  <blp@gnu.org>
837
838         * casefile.c: (casefile_destroy) Fix memory leak by freeing
839         cf->filename.
840         (casereader_destroy) Don't close file descriptor -1.
841
842         * recode.c: (cmd_recode) Fix memory leak.
843
844         * set.q: (q2c specifications) Fix typo in user message.
845
846         * str.c: (st_bare_pad_len_copy) Change memcpy to memmove to avoid
847         undefined behavior for overlapping arguments.
848
849 Sun May 30 18:31:48 2004  Ben Pfaff  <blp@gnu.org>
850
851         * casefile.c: valgrind doesn't implement posix_fadvise() yet, so
852         don't call it when we're running under valgrind.
853         (call_posix_fadvise) New function.
854         (casefile_to_disk) Use call_posix_fadvise().
855         (reader_open_file) Ditto.
856         
857 Sun May 30 18:20:12 2004  Ben Pfaff  <blp@gnu.org>
858
859         Update our string ADTs, struct string and struct len_string.  Get
860         rid of pool support, which was largely unused.  Rename lots of
861         functions to have more obvious or consistent names.
862         
863         * ascii.c: Get rid of ascii_pool.  It was only used for string
864         allocations.
865         (ascii_open_global) Don't create ascii_pool.
866         (ascii_close_driver) Don't destroy ascii_pool.
867         (ascii_postopen_driver) Don't use pool.
868         (ascii_close_driver) Destroy strings manually.
869
870         * str.c: (ds_create) Remove pool argument, all references updated.
871         (ds_init) Ditto.
872         (ds_replace) Remove pool support, make more efficient when we
873         don't need to reallocate.
874         (ds_destroy) Remove pool support.
875         (ds_rpad) New function.
876         (ds_size) Renamed ds_capacity(), all references updated.
877         (ds_value) Renamed ds_c_str(), all references updated.
878         (ds_concat) Renamed ds_puts(), all references updated.
879         (ds_concat_buffer) Renamed ds_concat(), all references updated.
880         (ds_putchar) Renamed ds_putc(), all references updated.
881         (ds_getline) Renamed ds_gets(), all references updated.
882         (ls_create) Remove pool argument, all references updated.
883         (ls_create_buffer) Ditto.
884         (ls_destroy) Removed pool support.
885         (ls_value) Renamed ls_c_str(), all references updated.
886
887         * str.h: (ls_length) [__GNUC__] Add inline version.
888         (ls_c_str) [__GNUC__] Add inline version.
889         (ls_end) [__GNUC__] Add inline version.
890         (struct string) Remove pool member.  Rename `size' to `capacity',
891         all references updated.
892
893         * tab.c: (text_format) Instead of using pool argument to
894         ls_create_buffer(), call pool_register() on allocated data.
895
896 Mon Apr 26 22:40:07 2004  Ben Pfaff  <blp@gnu.org>
897
898         We're abusing the current ASCII driver by telling it to allocate a
899         9999-line, 9999-character page in the tests.  This causes some
900         systems to curl up and die because it allocates 20 MB of
901         contiguous RAM.  This change alleviates at least part of the
902         problem.  It is mostly a stop-gap until the new output system is
903         ready.
904         
905         * ascii.c: (struct line) New structure.
906         (struct ascii_driver_ext) Remove `page', `page_size', `line_len',
907         `line_len_size', `n_output' members.  Add `lines', `lines_cap'.
908         (ascii_preopen_driver) Initialize new members, not old ones.
909         (ascii_close_driver) Destroy new members, not old ones.
910         (ascii_open_page) Allocate new members, not old ones.
911         (expand_line) Allocate room in line.
912         (draw_line) Use new members.
913         (ascii_line_horz) Ditto.
914         (ascii_line_vert) Ditto.
915         (ascii_line_intersection) Ditto.
916         (text_draw) Ditto.
917         (output_lines) Ditto.
918         (ascii_close_page) Ditto.
919
920 Sun Apr 25 23:40:15 2004  Ben Pfaff  <blp@gnu.org>
921
922         * matrix.c: Dead code.  Removed.
923
924         * matrix.h: Dead code.  Removed.
925
926 Fri Apr 16 23:59:51 2004  Ben Pfaff  <blp@gnu.org>
927
928         Contrary to what I'd always understood, there is an efficient
929         algorithm for deletion from a hash table populated via linear
930         probing.  This change implements it.
931         
932         * hash.c: (hsh_rehash) Probe in increasing order.
933         (hsh_probe) Ditto.
934         (locate_matching_entry) Ditto.
935         (hsh_delete) Use Knuth's Algorithm 6.4R for deletion.
936
937 Tue Apr 13 19:24:15 2004  Ben Pfaff  <blp@gnu.org>
938
939         * moments.c (calc_moments): Adjust calculation of kurtosis to
940         avoid subtracting huge numbers from huge numbers, on Michael
941         Kiefte's advice.
942
943 Sun Apr 11 14:22:12 2004  Ben Pfaff  <blp@gnu.org>
944
945         Rework moments routines for improved numerical stability based on
946         Michael Kiefte's advice.  Any bugs or remaining numerical problems
947         are still mine though.
948
949         There is now a struct moments1 for use with one-pass moments.  It
950         uses a provisional means algorithm as an attempt to improve
951         accuracy of higher moments.  The older struct moments now only
952         handles two-pass moments.
953         
954         * aggregate.c: Use moments1 instead moments.
955
956         * descript.c: Revert previous change, which is no longer needed
957         due to the moments revision.
958
959         * moments.c: (calc_moments) New function for calculating variance,
960         skewness, kurtosis.
961         (moments_pass_one) Only accumulate weights bigger than zero.
962         (moments_calculate) Allow calculating the mean on pass one, others
963         require pass two.  Implement in terms of calc_moments().
964         (struct moments1) New structure.
965         (init_moments1) New function.
966         (moments1_clear) Ditto.
967         (moments1_create) Ditto.
968         (moments1_add) Ditto.
969         (moments1_calculate) Ditto.
970         (moments1_destroy) Ditto.
971         (cmd_debug_moments) Deal with `struct moments' or `struct
972         moments1' as requested by user.
973
974 Sun Apr 11 14:21:55 2004  Ben Pfaff  <blp@gnu.org>
975
976         * Makefile.am (pspp_SOURCES): Remove debug.c.
977
978         * debug.c: Removed.  It was empty anyway.
979
980 Fri Apr  9 20:04:49 2004  Ben Pfaff  <blp@gnu.org>
981
982         * descript.c (calc_descriptives): Fix assert failure when only
983         MOMENT_MEAN is needed.
984
985 2004-04-09  Michael Kiefte  <mkiefte@dal.ca>
986
987         * descript.c: 
988
989         fixed problem with parsing in match_statistic() causing
990         "DESCRIPTIVE STAT=MEAN." to barf.
991
992         "MEAN" is now default if "SORT" given without specification.
993
994         Fixed infinite loop with "DESCRIPT GIBBERISH=ALL."  Parsing is
995         generally less forgiving of syntax errors: better to have it do
996         nothing and type it in again then to not know what it actually did
997         instead.  
998
999         z-score transformation now checks score for user-missing values
1000         and checks std_dev for SYSMIS.
1001
1002 2004-04-06  Michael Kiefte  <mkiefte@dal.ca>
1003
1004         * aggregate.c, crosstabs.q, descript.c, dictionary.c, frequencies.q, levene.c, t-test.q, var.h: 
1005         Changed dict_get_case_weight() to accept an additional int * flag
1006         to complain about system-missing, user-missing, zero, or negative
1007         weights and updated existing functions to pass int * to
1008         dict_get_case_weight().
1009
1010 2004-04-05  jmd  <jmd@gnu.org>
1011
1012         * main.c: Fixed configuration problems with gsl
1013
1014         * t-test.q: Fixed some problems encountered when compiling under Cygwin
1015
1016 2004-04-03  blp  <blp@gnu.org>
1017
1018         * lexer.c, ChangeLog:
1019         Fix infinite loop on comment at end of file, add test.
1020
1021 2004-04-03  jmd  <jmd@gnu.org>
1022
1023         * settings.h, var.h, ChangeLog, Makefile.am, cmdline.c, command.c, command.h, error.h, filename.c, frequencies.q, lexer.h, main.c, q2c.c, set.q:
1024         Fixed the calculation of percentiles and added --syntax and --algorithm options
1025
1026 Sat Apr  3 11:43:37 2004  Ben Pfaff  <blp@gnu.org>
1027
1028         * lexer.c: (lex_skip_comment) Handle end-of-file correctly (I
1029         hope).
1030
1031 Sat Apr  3 15:00:18 WST 2004 John Darrington <john@darrington.wattle.id.au>
1032
1033         * frequencies.q:  Fixed the calculation of percentiles
1034
1035         * Makefile.am:  Added the --ansi flag and dealt with the
1036         consequences.  Added some entries to PSPP_sources so that
1037         make distcheck would pass
1038
1039         * cmdline.c:   Added the --syntax and --algorithm options
1040
1041         * q2c.c:  Added an implicit /ALGORITHM subcommand to everything.
1042
1043 Fri Apr  2 11:25:22 WAST 2004 John Darrington <john@darrington.wattle.id.au>
1044
1045         * t-test.q, levene.c, levene.h  Converted t-test (incl levene) to 
1046         use the new multipass_split_... mechanism.
1047
1048 Wed Mar 31 22:36:22 2004  Ben Pfaff  <blp@gnu.org>
1049
1050         * frequencies.q: (calc_stats) Use moments data structure and
1051         calc_seskew(), calc_sekurt() functions.
1052
1053         * set.q main.c settings.h Added support for --syntax and --algorithm 
1054         options
1055
1056 Tue Mar 30 22:04:19 2004  Ben Pfaff  <blp@gnu.org>
1057
1058         * vfm.c: Had to get last call to multipass_split_output() inside
1059         open_active_file()/close_active_file() pairing, so introduce new
1060         function.
1061         (internal_procedure) Move procedure() code here, except for calls
1062         to open_active_file() and close_active_file().
1063         (procedure) Wrap open_active_file() and close_active_file() around
1064         internal_procedure().
1065         (multipass_procedure_with_splits) Wrap open_active_file() and
1066         close_active_file() around internal_procedure().
1067
1068 Tue Mar 30 22:01:57 2004  Ben Pfaff  <blp@gnu.org>
1069
1070         * descript.c: (cmd_descriptives) Free `vars' to avoid memory leak.
1071
1072 Mon Mar 29 16:26:40 2004  Ben Pfaff  <blp@gnu.org>
1073
1074         * debug.c: Removed.  Moved cmd_debug_evaluate() into expr-evl.c.
1075
1076         * expr-evl.c: (cmd_debug_evaluate) Moved here from debug.c.
1077
1078 Mon Mar 29 16:03:08 2004  Ben Pfaff  <blp@gnu.org>
1079
1080         * algorithm.c: By default turn off some of the more expensive
1081         assertions.
1082         (expensive_assert) New macro which expands to assert if
1083         EXTRA_CHECKS is defined, to nothing otherwise.
1084         (unique) Use expensive_assert().
1085         (binary_search) Ditto.
1086         (push_heap) Ditto.
1087         (pop_heap) Ditto.
1088         (make_heap) Ditto.
1089         (sort_heap) Ditto.
1090
1091         * command.c: (conflicting_3char_prefixes) Words that are the same
1092         don't cause conflicts when they are abbreviated to the first three
1093         letters.
1094
1095         * expr-evl.c: (CONCAT_func) Fix memory leak by incrementing struct
1096         nonterm_node's n earlier.
1097         (generic_str_func) Ditto.
1098         
1099 Mon Mar 29 15:32:17 2004  Ben Pfaff  <blp@gnu.org>
1100
1101         Add support for multipass procedures.  Rewrite DESCRIPTIVES to
1102         test multipass support, take advantage of new moments
1103         calculation, and to not be such crappy code.  Get rid of q2c
1104         processing for DESCRIPTIVES.
1105
1106         * vfm.c: (struct multipass_split_aux_data) New structure.
1107         (multipass_procedure_with_splits) New function.
1108         (multipass_split_callback) New function.
1109         (multipass_split_output) New function.
1110         * descript.q: Removed.
1111
1112         * descript.c: New file.
1113
1114         * var.h: Removed descriptives enums.
1115         (struct descriptives_proc) Removed.
1116         (struct variable) Removed p.dsc.
1117
1118         * Makefile.am: (q_sources_c) Remove descript.c.
1119         (q_sources_q) Removed descript.q.
1120         
1121 Mon Mar 29 15:31:55 2004  Ben Pfaff  <blp@gnu.org>
1122
1123         New manager for keeping track of used workspace.
1124         
1125         * workspace.c: New file.
1126
1127         * workspace.h: New file.
1128
1129         * Makefile.am: (pspp_SOURCES) Add workspace.c, workspace.h.
1130
1131         * sort.c: (do_internal_sort) Use workspace_malloc().
1132         (destroy_internal_sort) Use workspace_free().
1133
1134 Mon Mar 29 15:31:08 2004  Ben Pfaff  <blp@gnu.org>
1135
1136         New `struct casefile' for managing sets of cases.
1137
1138         * casefile.c: New file.
1139
1140         * casefile.h: New file.
1141
1142         * command.def: Add DEBUG CASEFILE command.
1143
1144         * Makefile.am: (pspp_SOURCES) Add casefile.c, casefile.h.
1145
1146         * sort.c: (sort_cases) Move logic for sending storage file to disk
1147         into do_external_sort().
1148         (struct internal_sort) Use an array of ccase pointers instead of a
1149         case_list.
1150         (do_internal_sort) Rewrite to handle casefiles.
1151         (compare_case_list) Removed.
1152         (compare_cases) New function.
1153         (compare_case_dblptrs) New function.
1154         (read_internal_sort_output) Deal with new struct internal_sort.
1155
1156         * vfm.c: (static var workspace_overflow) Removed.
1157         (struct storage_stream_info) Removed all the members.  Added
1158         struct casefile * member.
1159         (storage_sink_open) Use casefile.
1160         (open_storage_file) Removed.
1161         (write_storage_file) Removed.
1162         (storage_to_disk) Removed.
1163         (destroy_storage_stream_info) Use casefile.
1164         (storage_sink_write) Use casefile.
1165         (storage_sink_make_source) Use casefile.
1166         (storage_source_count) Use casefile.
1167         (storage_source_read) Use casefile.
1168         (storage_source_on_disk) Removed.
1169         (storage_source_get_cases) Removed.
1170         (storage_source_set_cases) Removed.
1171         (storage_source_get_casefile) New function.
1172         
1173 Mon Mar 29 15:30:09 2004  Ben Pfaff  <blp@gnu.org>
1174
1175         New `struct moments' for calculating moments.
1176
1177         * stats.c: Removed.
1178
1179         * stats.h: Removed.
1180
1181         * moments.c: New file.
1182
1183         * moments.h: New file.
1184
1185         * command.def: Add DEBUG MOMENTS command.
1186
1187         * Makefile.am: (pspp_SOURCES) Add moments.c, moments.h.  Remove
1188         stats.c, stats.h.
1189
1190         * aggregate.c: Modify AGGREGATE to use the new moments
1191         calculation, even if not in such a great way.
1192         (struct agr_var) Add `moments' member.
1193         (parse_aggregate_functions) Set `moments' member to null.
1194         (agr_destroy) Destroy `moments' member.
1195         (accumulate_aggregate_info) Use `moments' for standard deviation.
1196         (dump_aggregate_info) Ditto.
1197         (initialize_aggregate_info) Create or clear `moments'.
1198
1199         * misc.h: Add pow2(), pow3(), pow4() functions in place of sqr(),
1200         cube(), pow4() that were in stats.h.  All references updated.
1201
1202         * crosstabs.q: stats.h had chi-square significance functions.  Use
1203         GSL instead.
1204         (display_chisq) Use gsl_cdf_chisq_Q() instead of chisq_sig().
1205
1206         * expr-evl.c: (expr_evaluate) Use moments_of_values() for
1207         OP_CFVAR, OP_MEAN, OP_SD, OP_VARIANCE.
1208                 
1209 Fri Mar 26 14:21:23 2004  Ben Pfaff  <blp@gnu.org>
1210
1211         * dictionary.c: (dict_compact_values) Compacted values need to
1212         start off from 0.
1213
1214 Fri Mar 26 00:54:57 2004  Ben Pfaff  <blp@gnu.org>
1215
1216         * var-labs.c: (cmd_variable_labels) For compatibility, don't allow
1217         `/' at start.  Check return value of parse_variables() for error
1218         return.
1219
1220 Fri Mar 26 00:19:27 2004  Ben Pfaff  <blp@gnu.org>
1221
1222         Revamp expressions: make the code a little nicer, and fix bugs
1223         found in testing.
1224         
1225         * expr-evl.c: (expr_evaluate) Make expression argument const.
1226         Support OP_ADD, OP_SUB, OP_MUL, OP_DIV instead of OP_PLUS, OP_MUL.
1227         OP_POW is missing for arg 2 <= 0.  OP_LOG is natural log, not
1228         base-10 log.  Fix OP_ANY, OP_ANY_STRING, OP_RANGE, OP_RANGE_STRING
1229         off-by-ones.  Add OP_MAX_STRING, OP_MIN_STRING.  Fix OP_TIME_HMS,
1230         OP_DATE_WKYR boundary conditions.  Add OP_CTIME_DAYS,
1231         OP_CTIME_HOURS, OP_CTIME_MINUTES, OP_CTIME_DAYS, OP_CTIME_SECONDS.
1232         Support OP_INDEX_2, OP_INDEX_3, OP_RINDEX_2, OP_RINDEX_3 instead
1233         of OP_INDEX, OP_INDEX_OPT, OP_RINDEX, OP_RINDEX_OPT.  Merge
1234         OP_LPAD_OPT into OP_LPAD, OP_RPAD_OPT into OP_RPAD, OP_LTRIM_OPT
1235         into OP_LTRIM, OP_RTRIM_OPT into OP_RTRIM, OP_NUMBER_OPT into
1236         OP_NUMBER.  Fix OP_RTRIM fragility.  Support OP_SUBSTR_2,
1237         OP_SUBSTR_3 instead of OP_SUBSTR, OP_SUBSTR_OPT.  Remove OP_INV.
1238         Simplify OP_SYSMIS.  Remove OP_STR_MIS.
1239
1240         * expr-opt.c: (optimize_expression) Rewrite.
1241         (macro n0) Removed.
1242         (macro n1) Removed.
1243         (macro n2) Removed.
1244         (macro s0) Removed.
1245         (macro s0l) Removed.
1246         (macro s1) Removed.
1247         (macro s1l) Removed.
1248         (macro s2) Removed.
1249         (macro s2l) Removed.
1250         (macro s) Removed.
1251         (macro sl) Removed.
1252         (eq_num_con) New function.
1253         (optimize_tree) New function.
1254         (macro rnc) Removed.
1255         (macro frnc) Removed.
1256         (str_search) Add const to string params.
1257         (str_rsearch) Ditto.
1258         (evaluate_tree_no_missing) Renamed from evaluate_tree.  Add num[],
1259         str[], str_len[] locals to substitute for most of removed macros.
1260         Support OP_ADD, OP_SUB, OP_MUL, OP_DIV instead of OP_PLUS, OP_MUL.
1261         Removed support for missing values because we're never called with
1262         missing values.  Use set_number() or set_number_errno() instead of
1263         rnc or frnc.  Removed any stuff that caused trouble in testing.
1264         We can re-add it later if it really slows anything.  Fix some
1265         random problems.
1266         (evaluate_tree_with_missing) Not yet supported.  To be added later
1267         if it's important.
1268         (repl_num_con) Removed.
1269         (collapse_node) New function.
1270         (force_repl_num_con) Removed.
1271         (set_number) New function.
1272         (set_number_errno) New function.
1273         (repl_str_con) Removed.
1274         (set_string) New function.
1275         (yrmoda) Tighten boundary conditions.  Adopt 2030 cut-off for
1276         2-digit years.
1277         (dump_node) No special case for OP_AND, OP_OR.
1278
1279         * expr-prs.c: (expr_prs) Honor EXPR_NO_OPTIMIZE bit.  Rewrite.
1280         (expr_get_type) New function.
1281         (type_check) Rewrite.
1282         (type_coercion) New function.
1283         (struct operator) New structure.
1284         (match_operator New function.
1285         (parse_binary_operators) New function.
1286         (parse_inverting_unary_operator) New function.
1287         (parse_or) Rewritten.
1288         (parse_and) Rewritten.
1289         (parse_not) Rewritten.
1290         (parse_rel) Rewritten.
1291         (parse_add) Rewritten.
1292         (parse_mul) Rewritten.
1293         (parse_neg) Rewritten.
1294         (parse_exp) Rewritten.
1295         (parse_sysvar) Add $TRUE, $FALSE system variables.
1296         Get $LENGTH, $WIDTH from get_viewlength(), get_viewwidth().
1297         (parse_primary) Use allocate_var_node(), allocate_num_con(),
1298         allocate_str_con().
1299         (struct function) Remove desc, change `func' prototype.
1300         (unary_func) Remove special cases.
1301         (MISSING_func) Reduce to unary_func() that just returns a boolean.
1302         (SYSMIS_func) Handle SYSMIS((x)) like SYSMIS(x).
1303         (VALUE_func) Use allocate_var_node().
1304         (nary_num_func) Allow MIN and MAX for strings.
1305         Use allocate_var_node().  Properly clean up.
1306         Fix return type.
1307         (generic_str_func) Use local table instead of removed `desc'
1308         member.  Mostly rewrite.
1309         (get_num_args) Revise error message.
1310         (parse_function) Return EXPR_ERROR, not 0 on error.
1311         (macro op) Removed.
1312         (macro varies) Removed.
1313         (ops[]) Use expr.def.
1314         (free_node) Do nothing if node is null.
1315         (allocate_num_con) New function.
1316         (allocate_str_con) New function.
1317         (allocate_var_node) New function.
1318         (allocate_binary_nonterminal) New function.
1319         (append_nonterminal_arg) Removed.
1320         (static var func_tab[]) Revised.
1321         (expr_debug_print_postfix) Make parameter const.
1322         Use printf() instead of debug_printf().
1323
1324         * expr.def: New file.
1325         
1326         * expr.h: Change PXP_* to EXPR_*, all references updated.  Also
1327         use named enum instead of unnamed, all references updated.  Add
1328         EXPR_ANY, EXPR_NO_OPTIMIZE.
1329
1330         * exprP.h: Remove EX_*.  Add DEFINE_OPERATOR.  Use expr.def
1331         instead of defining OP_* directly.
1332         (macro IS_TERMINAL) New macro.
1333         (macro IS_NONTERMINAL) New macro.
1334         (enum OP_NO_FLAGS) New.
1335         
1336 Fri Mar 26 00:18:01 2004  Ben Pfaff  <blp@gnu.org>
1337
1338         * error.c: (err_assert_fail) msg variable needs to be non-const.
1339
1340 Fri Mar 26 00:17:24 2004  Ben Pfaff  <blp@gnu.org>
1341
1342         * debug.c: (cmd_debug_evaluate) Rewrite.
1343
1344 Fri Mar 26 00:15:13 2004  Ben Pfaff  <blp@gnu.org>
1345
1346         Fix some CROSSTABS bit rot stupidity.
1347
1348         * crosstabs.q: Reorder the CELLS subcommands for compatibility.
1349         (internal_cmd_crosstabs) Initializes cells[] correctly.
1350         (float_M_suffix) Rename format_cell_entry(), change prototype,
1351         rewrite.
1352         (display_crosstabulation) Fix cell formatting.
1353
1354 Fri Mar 26 00:14:09 2004  Ben Pfaff  <blp@gnu.org>
1355
1356         Make lex_rest_of_line(), lex_entire_end() not discard lines.  Have
1357         to call lex_discard_line() to do that.
1358
1359         * command.c: (run_command) Call lex_discard_line() after
1360         lex_rest_of_line().
1361
1362         * lexer.c: (lex_entire_end) Change behavior.
1363         (lex_rest_of_line) Change behavior.  Return const char *.
1364         (lex_discard_line) Don't clear getl_buf, don't emit message.
1365
1366         * main.c: (handle_error) Emit message here.
1367
1368         * repeat.c: (internal_cmd_do_repeat) Use lex_discard_line()
1369         instead of lex_entire_line().
1370
1371         * str.c: (mm_find_reverse) Make length params size_t.  Rewrite.
1372
1373         * title.c: (get_title) Call lex_discard_line() after
1374         lex_rest_of_line().
1375         (cmd_file_label) Ditto.
1376         (cmd_document) Deal with const char * return value.
1377
1378 Fri Mar 26 00:10:16 2004  Ben Pfaff  <blp@gnu.org>
1379
1380         Removed REMARK command.
1381
1382         * command.c: (extract_prefix) Removed.
1383         (output_line) Removed.
1384         (cmd_remark) Removed.
1385
1386         * command.def: Remove REMARK.
1387
1388 Fri Mar 26 00:08:38 2004  Ben Pfaff  <blp@gnu.org>
1389
1390         Added abort() after lots of assert(0) invocations to avoid some
1391         compiler warnings.  We really need a NOT_REACHED macro.
1392
1393 Tue Mar 23 08:00:42 WAST 2004 John Darrington <john@darrington.wattle.id.au>
1394
1395         * sort.c: Added missing call to temp_file_close.  Changed error 
1396         messages to warnings.
1397
1398         * set.q: Improved setting of set_view{length,width} to be more tolerant
1399         of buggy OSes.
1400
1401 Sun Mar 21 10:11:14 WST 2004 John Darrington <john@darrington.wattle.id.au>
1402
1403         * val-labs.c: Fixed a bug where PSPP would crash, if VALUE LABELS was
1404         used with incorrect syntax.
1405
1406         * error.c, error.h et al:  Overridden definition of assert for a
1407         custom one.
1408
1409         * test-q.c: Fixed a buglet where it would crash if no /VARIABLES
1410         subcommand was given when it ought to have been.
1411
1412 Sat Mar 20 22:19:08 2004  Ben Pfaff  <blp@gnu.org>
1413
1414         * tab.c: (tab_vline) Fix assertions to respect row_ofs and
1415         col_ofs.
1416         (tab_hline) Ditto.
1417         (tab_box) Ditto.
1418         (tab_joint_text) Ditto.
1419
1420 Sat Mar 20 17:57:23 2004  Ben Pfaff  <blp@gnu.org>
1421
1422         * levene.c: Add #include.
1423
1424         * set.q: (set_viewport) Add `int' argument to make its prototype
1425         correct for signal().
1426
1427 Sat Mar 20 15:35:17 2004  Ben Pfaff  <blp@gnu.org>
1428
1429         * expr-evl.c: (expr_evaluate) Assert that `c' is nonzero before
1430         using it.
1431
1432 Sat Mar 20 15:18:16 2004  Ben Pfaff  <blp@gnu.org>
1433
1434         Changed DFM from open-at-first-access to explicit-open.  Before,
1435         calling dfm_get_record() or dfm_put_record() would automatically
1436         open the file.  Now, you have to call dfm_open_for_reading() or
1437         dfm_open_for_writing() explicitly.  This makes it possible to
1438         check permissions, file existence, etc. earlier.
1439
1440         Also made struct file_handle more opaque, and clean up in general.
1441
1442         * data-list.c: (cmd_data_list) Open handle for reading.
1443
1444         * dfm.c: (struct dfm_fhuser_ext) Add `where', `saw_begin_data'
1445         members.
1446         (open_file_r) Renamed dfm_open_for_reading(), rewrote.
1447         (open_file_w) Renamed dfm_open_for_writing(), rewrote.
1448         (open_inline_file) Removed.
1449         (read_record) For inline_file, if we haven't seen BEGIN DATA, read
1450         it.  Deal with line_number in extension record instead of file
1451         handle.
1452         (dfm_get_record) Rewrote.
1453         (dfm_put_record) Rewrote.
1454         (dfm_push) Assert file is open and one of ours.  Deal with
1455         line_number in extension record instead of file handle.
1456         (dfm_pop) Assert file is open and one of ours.  Deal with
1457         line_number in extension record instead of file handle.
1458         (cmd_begin_data) Use dfm_open_for_reading().  Mark that we saw
1459         BEGIN DATA.     
1460
1461         * file-handle.h: (enum constants RH_RF_*) Removed.
1462         (enum constants FH_MD_*) Removed.
1463         (struct file_handle) Removed `name', `norm_fn', `fn', `where',
1464         `recform', `lrecl', `mode' members.  Public references to
1465         `recform' changed to use handle_get_mode(), references to `lrecl'
1466         changed to use handle_get_record_width().  Added `private' member.
1467         (enum file_handle_mode) New.
1468
1469         * file-handle.q: (struct private_file_handle) New structure.
1470         (struct file_handle_list) New structure.
1471         (static var files) New.
1472         (static var file_handles) Removed.
1473         (init_file_handle) Removed.
1474         (create_file_handle) Removed.
1475         (get_handle_with_name) New function.
1476         (get_handle_for_filename) New function.
1477         (cmd_file_handle) Rewritten.
1478         (hash_file_handle) Removed.
1479         (cmp_file_handle) Removed.
1480         (fh_init_files) Rewritten.
1481         (fh_parse_file_handle) Rewritten.  Allows identifiers as
1482         filenames.
1483         (fh_get_handle_by_name) Renamed handle_get_name(), all references
1484         updated.  Rewritten.
1485         (fh_get_handle_by_filename) Renamed handle_get_filename(), all
1486         references updated.  Rewritten.
1487         (fh_record_width) Renamed handle_get_record_width(), all
1488         references updated.  Rewritten.
1489         (handle_get_mode) New function.
1490
1491         * file-type.c: (cmd_file_type) Open handle for reading.
1492
1493         * filename.c: [unix] (struct file_identity) New structure.
1494         [unix] (fn_get_identity) New function.
1495         [unix] (fn_free_identity) New function.
1496         [unix] (fn_compare_file_identities) New function.
1497         [!unix] (struct file_identity) New structure.
1498         [!unix] (fn_get_identity) New function.
1499         [!unix] (fn_free_identity) New function.
1500         [!unix] (fn_compare_file_identities) New function.
1501
1502         * lexer.c: (static var put) Renamed put_token, all references
1503         updated.
1504         (static var put_tokstr) New.
1505         (static var put_tokval) New.
1506         (lex_init) Initialize put_tokstr().
1507         (restore_token) New function.
1508         (save_token) New function.
1509         (lex_get) Use restore_token().
1510         (lex_put_back) Use save_token().
1511         (lex_put_back_id) New function.
1512         (lex_put_forward) Removed.
1513         (lex_preprocess_line) Set put_token instead of using
1514         lex_put_forward().
1515         (lex_negative_to_dash) Use save_token(), set put_token directly.
1516         (dump_token) Use stderr instead of stdout.
1517
1518         * main.c: (main) Remove call to cmd_init().
1519         
1520         * matrix-data.c: (cmd_matrix_data) Open file for reading.
1521
1522         * pfm-read.c: Use handle_get_filename() instead of trying to use
1523         h->fn directly, all over.
1524
1525         * pfm-write.c: Ditto.
1526
1527         * print.c: (internal_cmd_print) Open handle for writing.
1528         (dump_table) Use handle_get_filename().
1529         (print_trns_proc) Use handle_get_mode().
1530         (cmd_print_space) Use fh_parse_file_handle().
1531         Open handle for writing.
1532         [0] (debug_print) Removed.
1533
1534         * sfm-read.c: Use handle_get_filename() instead of trying to use
1535         h->fn directly, all over.
1536
1537         * sfm-write.c: Ditto.
1538
1539 Sat Mar 20 14:35:48 2004  Ben Pfaff  <blp@gnu.org>
1540
1541         Fix memory leaks.
1542         
1543         * autorecode.c: (arc_free) Free arc->src_values.
1544
1545         * error.c: (msg) Free buf.
1546
1547         * val-labs.c: (do_value_labels) Always free vars.
1548
1549         * vfm.c: (close_active_file) If sink has no make_source then call
1550         its destroy function.
1551
1552 Sat Mar 20 14:00:24 2004  Ben Pfaff  <blp@gnu.org>
1553
1554         Fixed cmd_parse() so that it always skips past a full command
1555         name.  A few special commands for which this would be bad get
1556         special treatment.  This lets us drop code for skipping past the
1557         end of a command name in most cmd_*() functions.  It's not worth
1558         listing all the commands affected.
1559
1560         * command.c: (struct command) Remove `cmd' member, replace by
1561         `name' member, all references updated.  Remove `word', `next',
1562         `skip_entire_name' members.
1563         (macro DEFCMD) Deal with revised `struct command'.
1564         (macro UNIMPL) Ditto.
1565         (macro SPCCMD) New macro for commands whose last word shouldn't be
1566         skipped.
1567         (static array cmd_table[]) Make const, rename `commands', remove
1568         sentinel element.
1569         (macro COMMAND_CNT) New macro.
1570         (split_words) Removed.
1571         (cmd_init) Removed.
1572         (FILE_TYPE_okay) Make parameter const.
1573         (cmd_parse) Improve error messages.
1574         (match_strings) New function.
1575         (next_word) New function.
1576         (enum command_match) New enum.
1577         (conflicting_3char_prefixes) New function.
1578         (conflicting_3char_prefix_command) New function.
1579         (cmd_match_words) New function.
1580         (count_matching_commands) New function.
1581         (get_command_name) New function.
1582         (free_words) New function.
1583         (unknown_command_error) New function.
1584         (figure_out_command) Renamed parse_command_name(), rewritten.
1585
1586         * command.def: Removed @ command.  Marked BEGIN DATA, DOCUMENT,
1587         FILE LABEL, REMARK, SUBTITLE, TITLE as special.  Renamed EVALUATE
1588         to DEBUG EVALUATE.  Added N alias for N OF CASES, SORT alias for
1589         SORT CASES.
1590
1591         * command.h: (macro SPCCMD) New.
1592
1593         * include.c: (cmd_include_at) Removed.
1594         (cmd_include) Allow identifier to be used as filename.
1595
1596         * inpt-pgm.c: (cmd_reread) Use fh_parse_file_handle().
1597
1598         * t-test.q: (cmd_t_test) Command name is now parsed for us.
1599         
1600
1601 Sat Mar 20 13:56:00 2004  Ben Pfaff  <blp@gnu.org>
1602
1603         Start work on better test framework.
1604         
1605         * Makefile.am: (pspp_sources) Add debug.c.
1606         
1607         * debug.c: New file.
1608
1609         * compute.c: (cmd_evaluate) Moved to debug.c, renamed
1610         cmd_debug_evaluate().
1611
1612         * expr-prs.c: (expr_parse) Remove PXP_DUMP support.
1613
1614         * expr.h: (enum constant PXP_DUMP) Removed.
1615
1616 Sat Mar 20 00:05:42 WST 2004 John Darrington <john@darrington.wattle.id.au>
1617
1618         * set.q:  Implemented the SHOW command, and synced it to the existing 
1619         SET cmd.
1620
1621         Added a handler for SIGWINCH so that viewlength and viewwidth follow
1622         changes as the window size is changed.
1623
1624         Added fallback to set viewlength and viewwidth from LINES and COLUMS
1625         environment variables if other methods are not available.
1626
1627         glob.c: Removed a lot of global variables from glob.c and encapsulated 
1628         them in set.q
1629
1630         random.c: Tidied up the way the random seed is set.
1631
1632         str.c: Added a ds_vprintf function.
1633
1634         error.c: Extended dump_message so that messages are always broken at
1635         '\n' characters.
1636         
1637 Thu Mar 18 11:07:14 2004  Ben Pfaff  <blp@gnu.org>
1638
1639         * pfm-write.c: (bufwrite) Write out the correct element for string
1640         variables.  From Andreas Streichardt <streichardt@globalpark.de>.
1641
1642 Mon Mar 15 20:48:03 2004  Ben Pfaff  <blp@gnu.org>
1643
1644         Get rid of static and global (!) vars in matrix-data.c.
1645
1646         * matrix-data.c: (static var nr_data) Removed.
1647         (static var nr_factor_values) Removed.
1648         (static var max_cell_index) Removed.
1649         (static var split_values) Removed.
1650         (struct nr_aux_data) New structure.
1651         (read_matrices_without_rowtype) Use a local struct nr_aux_data in
1652         place of static vars, pass to create_case_source() and procedure()
1653         as aux data.
1654         (nr_read_data_lines) Use struct nr_aux_data * parameter instead of
1655         struct matrix_data_pgm *.
1656         (nr_read_splits) Ditto.
1657         (nr_read_factors) Ditto.
1658         (nr_output_data) Ditto.
1659         (static var wr_content) Removed.
1660         (global var wr_data) Removed.
1661         (global var wr_current) Removed.
1662         (struct wr_aux_data) New structure.
1663         (read_matrices_with_rowtype) Use a local struct wr_aux_data in
1664         place of static vars, pass to create_case_source() and procedure()
1665         as aux data.
1666         (matrix_data_read_with_rowtype) Use struct wr_aux_data * parameter
1667         instead of matrix_data_pgm *.
1668         (wr_read_splits) Ditto.
1669         (wr_output_data) Ditto.
1670         (wr_read_rowtype) Ditto.
1671         (wr_read_factors) Ditto.
1672         (wr_read_indeps) Ditto.
1673         
1674 Mon Mar 15 20:07:29 2004  Ben Pfaff  <blp@gnu.org>
1675
1676         Get rid of static vars in autorecode.c.
1677
1678         * autorecode.c: (struct autorecode_trns) Rename `arc' to `specs',
1679         `n_arc' to `spec_cnt'.  All references updated.
1680         (static var v_src) Removed.
1681         (static var v_dest) Removed.
1682         (static var h_trns) Removed.
1683         (static var nv_src) Removed.
1684         (static var descend) Removed.
1685         (static var print) Removed.
1686         (enum direction) New enum.
1687         (struct autorecode_pgm) New structure.
1688         (cmd_autorecode) Use struct autorecode_pgm instead of static vars.
1689         Move n_dest local var into struct autorecode_pgm for ease of
1690         clean-up.  Use arc_free().
1691         (arc_free) New function.
1692         (recode) Modify to take struct autorecode_pgm * parameter instead
1693         of using statics.  Let the caller clean up.
1694         (autorecode_proc_func) Use struct autorecode_pgm * auxiliary data
1695         instead of statics.  Rearrange code a little.
1696
1697 Mon Mar 15 00:25:02 2004  Ben Pfaff  <blp@gnu.org>
1698
1699         Get rid of static, global vars in recode.c.  Remove debug code.
1700
1701         * recode.c: (static var head) Removed.
1702         (global var v) Removed.
1703         (global var nv) Removed.
1704         (cmd_recode) New local variables head, v, nv.  Initialize and free
1705         v.  Don't call debug_print().
1706         [DEBUGGING] (dump_dest) Removed.
1707         [DEBUGGING] (debug_print) Removed.
1708
1709 Mon Mar 15 00:14:49 2004  Ben Pfaff  <blp@gnu.org>
1710
1711         Get rid of static vars in expr-opt.c.
1712
1713         * expr-opt.c: (static var e) Removed.
1714         (static var nop) Removed.
1715         (static var mop) Removed.
1716         (static var ndbl) Removed.
1717         (static var mdbl) Removed.
1718         (static var nstr) Removed.
1719         (static var mstr) Removed.
1720         (static var nvars) Removed.
1721         (static var mvars) Removed.
1722         (struct expr_dump_state) New structure.
1723         (dump_expression) Use new struct expr_dump_state instead of static
1724         vars and pass to functions we call.
1725         (dump_node) Use struct expr_dump_state * parameter.
1726         (emit) Ditto.
1727         (emit_num_con) Ditto.
1728         (emit_str_con) Ditto.
1729         (emit_var) Ditto.
1730         
1731 Mon Mar 15 00:03:51 2004  Ben Pfaff  <blp@gnu.org>
1732
1733         Get rid of static var in COUNT.
1734
1735         * count.c: (static var head) Move into cmd_count().
1736         (cmd_count) [DEBUGGING] Don't call debug_print.
1737         [DEBUGGING] (debug_print) Removed.
1738
1739 Sun Mar 14 23:56:09 2004  Ben Pfaff  <blp@gnu.org>
1740
1741         Get rid of static vars in VALUE LABELS, ADD VALUE LABELS.
1742
1743         * val-labs.c: (static var v) Removed.
1744         (static var nv) Removed.
1745         [DEBUGGING] (debug_print) Removed.
1746         (verify_val_labs) Add struct variable **, int parameters.
1747         (get_label) Ditto.  Improve error messages, streamline.
1748         (erase_labels) New function for erasing value labels, taking over
1749         part of verify_val_labs()'s function.
1750         (init) Removed.
1751         (done) Removed.
1752         (cmd_value_labels) No need to call init() or done() anymore.
1753         (cmd_add_value_labels) Ditto.
1754         (do_value_labels) Add vars, var_cnt local variables.  Clean up
1755         after them internally.  Call erase_labels() if we should.  Don't
1756         call debug_print().
1757
1758 Sun Mar 14 23:33:53 2004  Ben Pfaff  <blp@gnu.org>
1759
1760         Get rid of static vars in MATCH FILES.
1761         
1762         * get.c: (static var mtf_head) Removed.
1763         (static var mtf_tail) Removed.
1764         (static var mtf_by) Removed.
1765         (static var mtf_n_by) Removed.
1766         (static var mtf_master) Removed.
1767         (static var mtf_seq_num) Removed.
1768         (static var mtf_seq_nums) Removed.
1769         (static var mtf_sink) Removed.
1770         (static var mtf_case) Removed.
1771         (struct mtf_proc) New structure.
1772         (cmd_match_files) Use struct mtf_proc instead of static vars.
1773         (mtf_processing_finish) Ditto.
1774         (mtf_free) Ditto.
1775         (mtf_delete_file_in_place) Ditto.
1776         (mtf_read_nonactive_records) Ditto.
1777         (mtf_compare_BY_values) Ditto.
1778         (mtf_processing) Ditto.
1779         (mtf_merge_dictionary) Ditto.
1780
1781 Sun Mar 14 22:48:12 2004  Ben Pfaff  <blp@gnu.org>
1782
1783         * command.def: Add CASESTOVARS, VARSTOCASES unimplemented commands.
1784
1785         * dictionary.c: (dict_rename_var) Add assertion.
1786         (dict_contains_var) Check by index instead of name.
1787
1788 Sun Mar 14 22:01:02 2004  Ben Pfaff  <blp@gnu.org>
1789
1790         Get rid of compaction_necessary, compaction_nval, compaction_case.
1791         Redo VFM interface.  Replace disk_sink and memory_sink by
1792         storage_sink, disk_source and memory_source by storage_source.
1793
1794         * vfm.h: (struct case_sink) Add `dict', `idx_to_fv', `value_cnt'
1795         members.
1796
1797         * vfm.c: 
1798         (struct write_case_data) Remove `begin_func', `end_func',
1799         `func_aux' members.  Add `aux', `trns_case', `sink_case',
1800         `cases_written', `cases_analyzed' members.
1801         (global var compaction_necessary) Make static.
1802         (global var compaction_nval) Removed.
1803         (global var compaction_case) Removed.
1804         (static var case_count) Removed.
1805         (struct procedure_aux_data) Removed.
1806         (struct split_aux_data) Removed.
1807         (procedure) Remove begin_func, end_func parameters.  Rewrite.
1808         (static var not_canceled) Removed.
1809         (process_active_file) Removed.
1810         (process_active_file_write_case) Removed.
1811         (process_active_file_output_case) Removed.
1812         (prepare_for_writing) Moved into open_active_file().
1813         (arrange_compaction) Ditto.
1814         (setup_lag) Ditto.
1815         (open_active_file) Rewrote.
1816         (write_case) New function.
1817         [DEBUGGING] (index_to_varname) Removed.
1818         (execute_transformations) New function.
1819         (exclude_this_case) Renamed filter_case(), changed interface.
1820         (clear_case) Added struct ccase * parameter to interface.
1821         (close_active_file) Added struct write_case_data * parameter,
1822         rewrote.
1823         (disk_sink_create) Removed.
1824         (disk_sink_destroy) Removed.
1825         (disk_sink_make_source) Removed.
1826         (disk_sink_write) Removed.
1827         (disk_source_count) Removed.
1828         (disk_source_destroy) Removed.
1829         (disk_source_read) Removed.
1830         (global var disk_sink_class) Removed.
1831         (global var disk_source_class) Removed.
1832         (global var memory_sink_class) Removed.
1833         (global var memory_source_class) Removed.
1834         (memory_sink_create) Removed.
1835         (memory_sink_destroy) Removed.
1836         (memory_sink_make_source) Removed.
1837         (memory_sink_write) Removed.
1838         (memory_source_count) Removed.
1839         (memory_source_destroy) Removed.
1840         (memory_source_get_cases) Removed.
1841         (memory_source_read) Removed.
1842         (memory_source_set_cases) Removed.
1843         (struct disk_stream_info) Removed.
1844         (struct memory_sink_info) Removed.
1845         (struct memory_source_info) Removed.
1846         (write_active_file_to_disk) Removed.
1847         (destroy_storage_stream_info) New function.
1848         (global var null_sink_class) New var.
1849         (global var storage_sink_class) New var.
1850         (global var storage_source_class) New var.
1851         (open_storage_file) New function.
1852         (storage_sink_destroy) New function.
1853         (storage_sink_make_source) New function.
1854         (storage_sink_open) New function.
1855         (storage_sink_write) New function.
1856         (storage_source_count) New function.
1857         (storage_source_destroy) New function.
1858         (storage_source_get_cases) New function.
1859         (storage_source_on_disk) New function.
1860         (storage_source_read) New function.
1861         (storage_source_set_cases) New function.
1862         (storage_source_to_disk) New function.
1863         (storage_to_disk) New function.
1864         (struct storage_stream_info) New structure.
1865         (write_storage_file) New function.
1866         (procedure_write_case) Removed.
1867         (create_case_source) Add `struct dictionary *' parameter, all
1868         references updated.
1869         (create_case_sink) Ditto.
1870         (free_case_sink) New function.
1871         (struct split_aux_data) New structure.
1872         (procedure_with_splits) New function implementing what procedure()
1873         used to.
1874         (SPLIT_FILE_proc_func) Removed.
1875         (procedure_with_splits_callback) New function.
1876         (equal_splits) New function.
1877         
1878         * aggregate.c: Pass around a struct instead of using statics.
1879         (static var outfile) Remove.
1880         (enum type) Give it tag `missing_treatment'.
1881         (static var missing) Remove.
1882         (static var sort) Remove.
1883         (static var agr_first) Remove.
1884         (static var agr_next) Remove.
1885         (static var case_count) Remove.
1886         (static var prev_case) Remove.
1887         (static var buf64_1xx) Remove.
1888         (static var buf_1xx) Remove.
1889         (struct agr_proc) New structure incorporating the above.
1890         (cmd_aggregate) Use new struct.  Clean up error handling using
1891         agr_destroy().  Completely rewrite actual implementation of
1892         aggregation.
1893         (create_sysfile) Add struct agr_proc * parameter, modify
1894         accordingly.
1895         (parse_aggregate_functions) Ditto.
1896         (free_aggregate_functions) Ditto.  Rename agr_destroy().
1897         (aggregate_single_case) Add struct agr_proc * parameter, modify
1898         accordingly.
1899         (accumulate_aggregate_info) Ditto.
1900         (dump_aggregate_info) Ditto.
1901         (initialize_aggregate_info) Ditto.
1902         (agr_00x_trns_proc) Removed.
1903         (agr_00x_end_func) Removed.
1904         (agr_10x_trns_proc) Removed.
1905         (agr_10x_trns_free) Removed.
1906         (agr_10x_end_func) Removed.
1907         (agr_11x_read) Removed.
1908         (agr_11x_finish) Removed.
1909         [DEBUGGING] (debug_print) Removed.
1910         (write_case_to_sfm) Add struct agr_proc * parameter, modify
1911         accordingly.
1912         (agr_to_active_file) New function.
1913         (presorted_agr_to_sysfile) New function.
1914         (sort_agr_to_sysfile) New function.
1915
1916         * autorecode.c: (cmd_autorecode) Use procedure_with_splits().
1917
1918         * crosstabs.q: (internal_cmd_crosstabs) Ditto.
1919
1920         * descript.q: (cmd_descriptives) Ditto.
1921
1922         * dfm.c: (cmd_begin_data) Check for storage_source_class.  Adapt
1923         to new procedure() interface.
1924
1925         * command.c: (cmd_execute) Adapt to new procedure() interface.
1926
1927         * dictionary.c: (dict_compact_values) Also delete scratch
1928         variables.
1929         (dict_get_compacted_value_cnt) New function.
1930         (dict_get_compacted_idx_to_fv) New function.
1931
1932         * flip.c: (cmd_flip) Warn about and cancel TEMPORARY.
1933         (cmd_flip) Adapt to new procedure() interface.
1934         (flip_sink_write) Use sink->idx_to_fv.
1935
1936         * frequencies.q: (internal_cmd_frequencies) Use
1937         procedure_with_splits().
1938
1939         * get.c: (cmd_save_internal) Adapt to new procedure() interface.
1940         (static var mtf_sink) New static var.
1941         (static var mtf_case) New static var.
1942         (cmd_match_files) Warn about and cancel TEMPORARY.  Redo the way
1943         we actually implement the matching.
1944         (mtf_delete_file_in_place) Use mtf_case.
1945         (mtf_processing) Use mtf_case and mtf_sink.
1946         (cmd_export) Adapt to new procedure() interface.
1947
1948         * levene.c: (levene) Use procedure_with_splits().
1949
1950         * list.q: (cmd_list) Use procedure_with_splits().
1951
1952         * matrix-data.c: (read_matrices_without_rowtype) Adapt to new
1953         procedure() interface.
1954         (read_matrices_with_rowtype) Ditto.
1955
1956         * modify-vars.c; (cmd_modify_vars) Warn about and cancel
1957         TEMPORARY.  Adapt to new procedure() interface.
1958
1959         * rename-vars.c: Warn about and cancel TEMPORARY.
1960
1961         * sort.c: (cmd_sort_cases) Warn about TEMPORARY.
1962         (sort_cases) Use dict_get_compacted_value_cnt() instead of
1963         compaction_nval.  Adapt to new procedure() interface.  Use
1964         storage_source_to_disk().
1965         (do_internal_sort) Don't try to dump the cases to memory.
1966         (compare_case_lists) Pass null idx_to_fv.
1967         (struct initial_run_state) Add `idx_to_fv' member.  Remove
1968         `case_size' member.
1969         (write_initial_runs) Don't initialize irs->case_size.  Adapt to
1970         new procedure() interface.  Reset irs->idx_to_fv after calling
1971         procedure().
1972         (sort_sink_write) Set irs->idx_to_fv.  Use case_size from struct
1973         sort_cases_pgm.  Pass irs, not struct sort_cases_pgm to
1974         push_heap().
1975         (destroy_initial_run_state) Don't dereference irs after freeing
1976         it.
1977         (allocate_cases) Don't calculate case_size locally.
1978         (compare_record) Add idx_to_fv parameter.
1979         (compare_record_run) Change parameter from struct sort_cases_pgm *
1980         to struct initial_run_state *.  Pass irs->idx_to_fv to
1981         compare_record().
1982         (compare_record_run) Third parameter now a struct
1983         initial_run_state *.
1984         (output_record) No need for out_case anymore.  Pass irs, not
1985         struct sort_cases_pgm to pop_heap().  Use case_size from struct
1986         sort_cases_pgm.
1987         (merge) Use case_size from struct sort_cases_pgm.
1988         (merge_once) Use case_size from struct sort_cases_pgm.
1989         Pass null pointer to compare_record() as idx_to_fv.
1990         (global var sort_sink_class) Make static.
1991
1992         * t-test.q: (cmd_t_test) Use procedure_with_splits().
1993
1994         * temporary.c: Remove debugging crap.
1995
1996 Sat Mar 13 14:19:52 WST 2004 John Darrington <john@darrington.wattle.id.au>
1997
1998         * t-test.q, levene.c: Fixed up the handling of MISSING values
1999         int the T-TEST
2000
2001 Fri Mar 12 16:23:35 WST 2004 John Darrington <john@darrington.wattle.id.au>
2002
2003         * t-test.q, levene.c: Added support for T-TEST /GROUP where only 
2004         one value is given.
2005
2006 Wed Mar 10 23:25:13 2004  Ben Pfaff  <blp@gnu.org>
2007
2008         Change explicit variable name checks into use of
2009         dict_class_from_id().
2010
2011         * dictionary.c: (dict_create_var)  Change explicit variable name
2012         check into use of dict_class_from_id().
2013
2014         * get.c: (trim_dictionary) Ditto.
2015
2016         * sel-if.c: (cmd_filter) Ditto.
2017
2018         * sysfile-info.c: (cmd_display) Ditto.
2019
2020         * vars-prs.c: (parse_DATA_LIST_vars) Ditto.
2021
2022         * vfm.c: (arrange_compaction) Ditto.
2023
2024         * weight.c: (cmd_weight) Ditto.
2025
2026 Wed Mar 10 21:16:34 2004  Ben Pfaff  <blp@gnu.org>
2027
2028         * temporary.c: (cmd_temporary) When TEMPORARY was the first
2029         transformation following the input program, if any, for some
2030         reason we special-cased f_trns.  That's just wrong.  It should
2031         always be set to n_trns.
2032
2033 Tue Mar  9 23:44:40 2004  Ben Pfaff  <blp@gnu.org>
2034
2035         * format.c: (parse_format_specifier_name) Fix brown-bag bug
2036         introduced in last check-in.
2037
2038 Tue Mar  9 23:10:41 2004  Ben Pfaff  <blp@gnu.org>
2039
2040         * format.c: (global array translate_fmt[]) Removed.
2041         (translate_fmt) New function as replacement.
2042         (parse_format_specifier_name) Rewrite.
2043
2044         * pfm-read.c: (convert_format) Use translate_fmt() instead of
2045         translate_fmt[].
2046
2047         * sfm-read.c: (parse_format_spec) Ditto.
2048
2049         * postscript.c: (text) Fix handling of fonts with missing
2050         ligatures.
2051
2052         * sort.c: (struct external_sort) Add temp_name member.
2053         (destroy_external_sort) Free temp_dir, temp_name members.
2054         (init_external_sort) Allocate temp_name.
2055         (get_temp_file_name) Change prototype.
2056         (open_temp_file) Deal with change to get_temp_file_name().
2057         (close_temp_file) Ditto.
2058         (remove_temp_file) Ditto.
2059         (write_temp_file) Ditto.
2060         (read_temp_file) Ditto.
2061         (sort_sink_destroy) Removed.
2062         (sort_sink_class) Change destroy member to null.
2063
2064 Tue Mar  9 22:36:34 2004  Ben Pfaff  <blp@gnu.org>
2065
2066         Eliminate temp_case.
2067
2068         * aggregate.c: (cmd_aggregate) No need to save/restore temp_case
2069         anymore.  Use agr_11x_finish().
2070         (aggregate_single_case) Make first param const.
2071         (accumulate_aggregate_info) Ditto.
2072         (agr_00x_end_func) Use compaction_case, not temp_case.
2073         (agr_11x_func) Break into agr_11x_read(), agr_11x_finish().
2074
2075         * data-list.c: (struct data_list_pgm) Add `case_size' member.
2076         (cmd_data_list) Initialize case_size.
2077         (read_from_data_list_fixed) Add struct ccase * param, use instead
2078         of temp_case.
2079         (read_from_data_list_free) Ditto.
2080         (read_from_data_list_list) Ditto.
2081         (read_one_case) Rename data_list_trns_proc(), all references
2082         updated.  Add argument in calling above functions.  Use c
2083         argument instead of temp_case.
2084         (destroy_dls) Rename data_list_trns_free(), all references
2085         updated.
2086
2087         * expr-evl.c: (expr_evaluate) Make second parameter const.
2088
2089         * file-type.c: (struct file_type_pgm) Add `case_size' member.
2090         (cmd_end_file_type) Initialize `case_size'.
2091         (file_type_source_read) Add struct ccase * parameter.  Use instead
2092         of temp_case.
2093
2094         * flip.c: Rewritten.
2095
2096         * get.c: (struct get_pgm) New structure to keep track of
2097         case_size.
2098         (cmd_get) Initialize case_size.
2099         (cmd_import) Ditto.
2100         (get_source) Deal with struct get_pgm.
2101         (get_source_read) Add struct ccase * parameter, use instead of
2102         temp_case.
2103         (import_source_read) Ditto.
2104
2105         * get.c: Use a null pointer instead of temp_case to represent the
2106         "current case" in a struct mtf_file's input member.
2107         (mtf_processing_finish) Pass null to mtf_processing(), not
2108         temp_case.
2109         (mtf_read_nonactive_records) Don't set iter->input to temp_case.
2110         (mtf_compare_BY_values) Add extra arg, use instead of null input
2111         members.
2112         (mtf_processing) Use c parameter instead of temp_case.  Pass
2113         compaction_case to process_active_file_output_case().
2114         
2115         * glob.c: (global variable temp_case) Removed.
2116
2117         * inpt-pgm.c: (struct input_program_pgm) Add `case_size' member.
2118         (cmd_input_program) Initialize case_size.  Set
2119         vfm_source->value_cnt.
2120         (init_case) Add struct ccase * parameter, use instead of
2121         temp_case.
2122         (clear_case) Ditto.
2123         (input_program_source_read) Ditto.
2124
2125         * matrix-data.c: (matrix_data_read_without_rowtype) Ditto.
2126         (dump_cell_content) Ditto.
2127         (nr_output_data) Ditto.
2128         (read_matrices_without_rowtype) Ditto.
2129         (matrix_data_read_with_rowtype) Ditto.
2130         (wr_read_splits) Ditto.
2131         (wr_output_data) Ditto.
2132
2133         * sort.h: (struct sort_cases_pgm) New member `case_size'.
2134         
2135         * sort.c: (sort_cases) Initialize scp->case_size.
2136         (struct external_sort) Remove `case_size' member.
2137         (write_initial_runs) Only call vfm_sink->class_destroy if
2138         non-null.
2139         (struct sort_source_aux) New structure.
2140         (sort_source_read_helper) New function.
2141         (sort_source_read) Use sort_source_read_helper().
2142         (read_sort_output) Change interface to be more reasonable.
2143         (read_internal_sort_output) Ditto.
2144         (read_external_sort_output) Ditto.
2145
2146         * vars-prs.c: (dict_class_to_name) Pass return value through
2147         gettext.
2148
2149         * vfm.c: (struct procedure_aux_data) Add `trns_case' member.
2150         (procedure) Initialize trns_case.
2151         (procedure) Pass trns_case to vfm_source->class->read().
2152         Free trns_case.
2153         (process_active_file) Start using struct procedure_aux_data.
2154         (process_active_file_write_case) Pass trns_case to
2155         transformations, lag_case(), clear_case().
2156         (process_active_file_output_case) Add struct ccase * parameter.
2157         (create_trns_case) New function.
2158         (make_temp_case) Removed.
2159         (vector_initialization) Removed.
2160         (close_active_file) Only call make_source if non-null, otherwise
2161         set vfm_source to null pointer.  Don't free temp_case.
2162         (disk_source_read) Add struct ccase * parameter, use instead of
2163         temp_case.
2164         (memory_source_read) Ditto.
2165         (lag_case) Add const struct ccase * member.
2166         (procedure_write_case) Use trns_case instead of temp_case.
2167         (clear_case) Add struct ccase * member, use instead of temp_case.
2168         (exclude_this_case) Ditto.
2169         (create_case_source) Add struct dictionary * parameter, use to
2170         initialize source->value_cnt.
2171
2172         * vfm.h: (struct case_source) Add `value_cnt' member.
2173         (struct case_source_class) Add struct ccase * parameter to `read'
2174         member function pointer.
2175         (struct case_sink_class) Make struct ccase * parameter const in
2176         `write' member function pointer.
2177         
2178 Wed Mar  3 20:44:37 2004  Ben Pfaff  <blp@gnu.org>
2179
2180         Fix a lot of "possibly uninitialized variable" warnings.  Some of
2181         them are even real bugs.  A few of them make me wonder how the
2182         code ever worked.
2183
2184         * aggregate.c: (parse_aggregate_functions) Initialize `function.
2185
2186         * ascii.c: (output_lines) Add default case to switch.
2187
2188         * crosstabs.q: Remove static variable `expected' and all
2189         references to it.
2190         (display_crosstabulation) Always calculate expected value.
2191         (calc_chisq) Ditto.
2192         (output_pivot_table) Initialize `cmp'.
2193         (display_crosstabulation) New variable `last_row', which is
2194         initialized.
2195
2196         * data-in.c: (parse_numeric) Always initialize sign.  How did this
2197         work at all?!
2198
2199         * data-list.c: (repeating_data_trns_proc) Always initialize code.
2200         Always set info.ofs.  (How did this work?!)
2201
2202         * expr-opt.c: (optimize_tree) Always initialize `m'.
2203         (evaluate_tree) Always initialize `c'.  (How did this work?)
2204
2205         * frequencies.q: (frq_custom_variables) Always initialize min,
2206         max.
2207         (frq_custom_grouped) Always initialize `dl'.
2208
2209         * groff-font.c: (groff_read_font) Always initialize char_set.
2210
2211         * matrix-data.c: (nr_output_data) Initialize `split'.
2212         (wr_read_splits) Remove shadowing split_cnt declaration.
2213         (wr_output_data) Initialize `split'.
2214
2215         * output.c: (tokener) Skip add character on syntax error.
2216
2217         * pool.c: (pool_strndup) Always set `copy'.  (How did this work?!)
2218
2219         * postscript.c: (read_ps_encodings) Use line.string instead of
2220         uninitialized `bp'.
2221         (write_text) Add default case to switch.
2222         (text) Always initialize multiple variables.  Fix bug with
2223         ligatures.
2224
2225         * print.c: (fixed_parse_fortran) Initialize head.
2226         (alloc_line) Add default case to switch.
2227
2228         * recode.c: (parse_dest_spec) Handle case where nothing matches.
2229         (recode_trns_proc) Move variable declaration inward.  Add default
2230         case to switch.
2231
2232         * sfm-read.c: (read_header) Initialize skip_amt.
2233
2234         * sysfile-info.c: (display_variables) Always initialize pc.
2235
2236         * vars-prs.c: Initialized `included'.
2237
2238 Wed Mar  3 09:30:09 2004  Ben Pfaff  <blp@gnu.org>
2239
2240         * main.c: (main) sigaction()'s sa_flags member was uninitialized.
2241         Just use signal() instead.
2242
2243 Wed Mar  3 09:26:30 2004  Ben Pfaff  <blp@gnu.org>
2244
2245         Get rid of vfm_sink_info and vfm_source_info.
2246         
2247         * aggregate.c: (agr_00x_end_func) Don't increment
2248         sfm_sink_info.ncases.
2249
2250         * sort.c: (do_internal_sort) Get case count from
2251         vfm_source->class->count().
2252         (struct external_sort) Add `case_size' member.
2253         (do_external_sort) Initialize case_size.
2254         (struct initial_run_state) Add `case_size' member.
2255         (write_initial_runs) Initialize case_size.
2256         (sort_sink_write) Use case_size.
2257         (read_external_sort_output) Use case_size.  Get case_cnt from
2258         initial_runs.
2259
2260         * vfm.c: (struct write_case_data) Add underscores to existing arg
2261         names, all references updated.  Renamed `aux' as `func_aux', all
2262         references updated.  Added new `aux' member.
2263         (global var vfm_source_info) Removed.
2264         (global var vfm_sink_info) Removed.
2265         (struct procedure_aux_data) New.
2266         (struct split_aux_data) New.
2267         (procedure) Use `aux' fields for procedure_aux_data,
2268         split_aux_data.
2269         (process_active_file_write_case) Pass case_count + 1 to
2270         transformation procedures, exclude_this_case().
2271         (process_active_file_output_case) Don't increment
2272         vfm_sink_info.ncases.
2273         (prepare_for_writing) Don't initialize vfm_sink_info.  Don't try
2274         to send data to disk early.
2275         (make_temp_case) Don't use vfm_sink_info.case_size.
2276         (close_active_file) Don't initialize vfm_source_info.
2277         (struct disk_stream_info) New, to allow for case_cnt and case_size fields.
2278         (disk_sink_create) Initialize and/or update disk_stream_info.
2279         (disk_sink_write) Ditto.
2280         (disk_sink_destroy) Ditto.
2281         (disk_sink_make_source) Ditto.
2282         (disk_source_read) Ditto.
2283         (disk_source_destroy) Ditto.
2284         (global var disk_source_class) Add disk_source_count().
2285         (disk_source_count) New function.
2286         (struct memory_sink_info) Add `case_cnt', `case_size' members.
2287         (struct memory_source_info) Ditto.
2288         (memory_sink_create) Deal with case_cnt, case_size.
2289         (memory_sink_write) Ditto.
2290         (memory_sink_make_source) Ditto.
2291         (memory_source_read) Ditto.
2292         (memory_source_count) New function.
2293         (memory_source_class) Add memory_source_count().
2294         (procedure_write_case) Don't use vfm_sink_info.ncases.  Do use
2295         proc_aux->cases_written, and pass it to transformation procedures
2296         and exclude_this_case ().
2297         (exclude_this_case) Add case_num parameter.  Pass it to
2298         expr_evaluate().
2299         (SPLIT_FILE_procfunc) Use split_aux->prev_case instead of static
2300         variable.
2301
2302         * vfm.h: (struct case_source_class) Add `count' member.
2303
2304         * vfmP.h: (struct stream_info) Removed.
2305         (global variable vfm_source_info) Removed.
2306         (global variable vfm_sink_info) Removed.
2307         
2308 Tue Mar  2 23:38:17 2004  Ben Pfaff  <blp@gnu.org>
2309
2310         * var.h: (typedef trns_proc_func) New typedef.
2311         (trns_free_func) New typedef.
2312         (struct trns_header) Change `proc' to type trns_proc_func, `free'
2313         to type trns_free_func.  This only changes the actual type of
2314         trns_proc_func, adding a `case_num' parameter.  Updated all
2315         implementations to use the typedefs instead.
2316
2317         * compute.c: (compute_num) Pass case_num to expr_evaluate().
2318         (compute_num_vec) Ditto.
2319         (compute_str) Ditto.
2320         (compute_str_vec) Ditto.
2321
2322         * do-if.c: (do_if_trns_proc) Ditto.
2323
2324         * expr-evl.c: (expr_evaluate) Add new case_num parameter, use for
2325         OP_CASENUM.
2326
2327         * inpt-pgm.c: (input_program_source_read) Maintain case count,
2328         pass to transformation functions.
2329         (reread_trns_proc) Pass case_num arg to expr_evaluate().
2330
2331         * loop.c: (loop_1_trns_proc) Ditto.
2332         (loop_2_trns_proc) Ditto.
2333         (loop_3_trns_proc) Ditto.
2334
2335         * print.c: (print_space_trns_proc) Ditto.
2336
2337         * sel-if.c: (select_if_proc) Ditto.
2338
2339 Tue Mar  2 11:36:52 2004  Ben Pfaff  <blp@gnu.org>
2340
2341         * frequencies.q: (cleanup_freq_tab) Avoid memory leak by
2342         destroying hash table.
2343
2344         * glob.c: (read_active_file) Variable not referenced, removed.
2345         (cancel_input_pgm) Ditto.
2346
2347         * levene.c: Add #include <stdlib.h> needed to call free().
2348
2349         * aggregate.c: (parse_aggregate_functions) Make `function'
2350         variable const.
2351
2352 Tue Mar  2 11:30:56 2004  Ben Pfaff  <blp@gnu.org>
2353
2354         Start working to eliminate VFM dependence on static variables.
2355
2356         * command.c: (cmd_parse) Use case_source_is_class().
2357
2358         * data-list.c: Rewrite to eliminate use of static variables.
2359
2360         * dfm.c: (cmd_begin_data) Use case_source_is_class().
2361
2362         * file-handle.q: (fh_handle_name) Make parameter const.
2363
2364         * file-type.c: Rewrite to eliminate use of static variables.
2365
2366         * flip.c: Rewrite to eliminate use of static variables.
2367
2368         * format.c: (get_format_var_width) New function.
2369
2370         * get.c: Eliminate use of static variables.
2371
2372         * inpt-pgm.c: Eliminate use of static variables.
2373
2374         * matrix-data.c: Eliminate use of static variables.
2375
2376         * set.q: (set_max_workspace) New variable.
2377         (cmd_set) Use SET WORKSPACE to modify set_max_workspace.
2378
2379         * var.h: (struct case_list) Move here from vfmP.h.
2380
2381         * vars-atr.c: (discard_variables) Handle new vfm_source type.
2382
2383         * vfm.c: (vfm_source) Change type from struct case_stream to
2384         struct case_source.
2385         (vfm_sink) Change type from struct case_stream to struct
2386         case_sink.
2387         (static var paging) Rename workspace_overflow, all references
2388         updated.
2389         (procedure) Use new class structures.
2390         (process_active_file) Ditto.
2391         (process_active_file_write_case) Ditto.
2392         (prepare_for_writing) Use set_max_workspace.  Use new class
2393         structures.
2394         (close_active_file) Use new class structures.  Free old sink.
2395         (global var disk_source_file) Removed.
2396         (global var disk_sink_file) Removed.
2397         (disk_stream_init) Removed.
2398         (disk_stream_read) Removed.
2399         (disk_stream_write) Removed.
2400         (disk_stream_mode) Removed.
2401         (disk_stream_destroy_source) Removed.
2402         (disk_stream_destroy_sink) Removed.
2403         (global var vfm_disk_stream) Removed.
2404         (disk_sink_create) New function.
2405         (disk_sink_write) New function.
2406         (disk_sink_destroy) New function.
2407         (disk_sink_make_source) New function.
2408         (disk_sink_class) New static var.
2409         (disk_source_read) New function.
2410         (disk_source_destroy) New function.
2411         (global var vfm_source_class) New var.
2412         (global var memory_source_cases) Removed.
2413         (global var memory_sink_cases) Removed.
2414         (global var memory_sink_max_cases) Removed.
2415         (struct memory_sink_info) New struct.
2416         (memory_stream_init) Removed.
2417         (memory_stream_read) Removed.
2418         (memory_stream_write) Removed.
2419         (memory_stream_mode) Removed.
2420         (memory_stream_destroy_source) Removed.
2421         (memory_stream_destroy_sink) Removed.
2422         (global var vfm_memory_stream) Removed.
2423         (page_to_disk) Renamed write_active_file_to_disk().
2424         (memory_sink_create) New function.
2425         (memory_sink_write) New function.
2426         (memory_sink_destroy) New function.
2427         (memory_sink_make_source) New function.
2428         (memory_sink_class) New static var.
2429         (memory_source_read) New function.
2430         (memory_source_destroy) New function.
2431         (memory_source_get_cases) New function.
2432         (memory_source_set_cases) New function.
2433         (global var vfm_source_class) New var.
2434         (procedure_write_case) Use new class structures.
2435         (create_case_source) New function.
2436         (case_source_is_complex) New function.
2437         (case_source_is_class) New function.
2438         (create_case_sink) New function.
2439
2440         * vfm.h: (global variable reinit_sysmis) Not used, removed.
2441         (global variable reinit_blanks) Not used, removed.
2442         (global variable init_zero) Not used, removed.
2443         (global variable init_blanks) Not used, removed.
2444         (struct case_source) New struct.
2445         (struct case_source_class) New struct.
2446         (struct case_sink) New struct.
2447         (struct case_sink_class) New struct.
2448         (struct case_stream) Removed.
2449
2450         * vfmP.h: (struct case_list) Moved to var.h.
2451
2452 Tue Mar  2 11:28:30 2004  Ben Pfaff  <blp@gnu.org>
2453
2454         * algorithm.c: (count_equal) New function.
2455         (count_if) New function.
2456         (unique) Add assertions.
2457         (partition) Add assertions.
2458         (is_partitioned) New function.
2459         (copy_if) Add assertions.
2460         (remove_equal) Add assertions.
2461         (lexicographical_compare) Rename lexicographical_compare_3way.
2462         (sort) Add assertions.  Rephrase some code.
2463         (is_sorted) New function.
2464
2465 Sun Feb 29 23:24:57 2004  Ben Pfaff  <blp@gnu.org>
2466
2467         Rewrite SORT CASES.
2468
2469         * sort.c: Completely rewrite.
2470
2471         * sort.h: Expose interface via struct sort_cases_pgm, not via
2472         global variables.
2473
2474         * aggregate.c: (sort) New static var.
2475         (cmd_aggregate) Use sort.
2476         (create_sysfile) Ditto.
2477         (aggregate_single_case) Ditto.
2478         (dump_aggregate_info) Ditto.
2479         (agr_00x_end_func) Ditto.
2480         (debug_print) Ditto.
2481
2482         * var.h: (enum SRT_ASCEND) Removed.
2483         (enum SRT_DESCEND) Removed.
2484         (struct sort_cases_proc) Removed.
2485         (struct variable) Remove p.srt member.
2486
2487 Sun Feb 29 23:22:45 2004  Ben Pfaff  <blp@gnu.org>
2488
2489         Get rid of the old, crappy heap structure and replace it by a new,
2490         shiny, C++ STL-like heap structure.
2491         
2492         * Makefile.am: (pspp_SOURCES) Remove heap.c, heap.h.
2493
2494         * algorithm.c: (push_heap) New function.
2495         (heapify) Ditto.
2496         (pop_heap) Ditto.
2497         (make_heap) Ditto.
2498         (sort_heap) Ditto.
2499         (is_heap) Ditto.
2500         
2501         * heap.c: Removed.
2502
2503         * heap.h: Removed.
2504
2505 Sun Feb 29 23:21:53 2004  Ben Pfaff  <blp@gnu.org>
2506
2507         Increase warning level.
2508         
2509         * Makefile.am: (AM_CFLAGS) Remove -Wnouninitialized.
2510
2511 Sat Feb 21 17:38:58 WST 2004 John Darrington <john@darrington.wattle.id.au>
2512
2513         * main.c: Added a signal handler for SIGSEGV requesting a bug report.
2514          
2515 Fri Feb 20 23:22:14 2004  Ben Pfaff  <blp@gnu.org>
2516
2517         * dictionary.c: (dict_create_var) Fix root cause of bug worked
2518         around by previous change log entry.
2519         
2520         * compute.c: (lvalue_finalize) Remove workaround from previous
2521         change log entry.
2522
2523 Fri Feb 20 14:37:41 WAST 2004 John Darrington <john@darrington.wattle.id.au>
2524
2525         * compute.c: Fixed a bug where the Format was not getting set for 
2526           computed variables (thus causing a crash when SAVEing).
2527
2528         * Added a test to stop this bug ever coming back
2529
2530 Wed Feb 18 22:21:35 2004  Ben Pfaff  <blp@gnu.org>
2531
2532         Got rid of approx.h.  In general, replaced all references to
2533         approx_eq() by ==, approx_lt() by <, etc.  Other types of changes
2534         noted below.
2535
2536         * Makefile.am: (pspp_SOURCES) Removed approx.h.
2537
2538         * data-out.c: (try_F) Replaced test for approx_eq(number, 0.0) by
2539         test for mag < EPSILON.
2540
2541         * misc.h: Add definition of EPSILON.
2542
2543 Wed Feb 18 21:32:44 2004  Ben Pfaff  <blp@gnu.org>
2544
2545         * vfm.c: (procedure) Add check to prevent recursive call.
2546
2547 Wed Feb 18 21:48:54 WST 2004 John Darrington <john@darrington.wattle.id.au>
2548
2549         * Moved the declarations relating to values to their own header file
2550           (val.h)
2551
2552         * Added levene.c and levene.h
2553
2554         * vars-atr.c: Changed the signature of compare_values to 
2555         take const * arguments.
2556                 
2557         * t-test.q: Changed the structure of struct t_test_proc 
2558        variables now contain their own group statistics information.
2559        Eventually, t_test_proc might get renamed, because it'd be 
2560        applicable to other commands too.
2561
2562 Mon Feb 16 23:15:51 2004  Ben Pfaff  <blp@gnu.org>
2563
2564         * data-out.c: Clean up.  Changed interface of convert_*() to take
2565         either a `double' or a `const char *' instead of a `const union
2566         value *'.  Update all implementations of those interfaces.
2567         (data_out) Use switch statements instead of a table.
2568         (convert_AHEX) Rewrite.
2569
2570         * format.h: Update comment.
2571
2572 Mon Feb 16 22:14:36 2004  Ben Pfaff  <blp@gnu.org>
2573
2574         * q2c.c: (dump_header) Add an Emacs header line to output files
2575         that makes generated .c files read-only by default, to make it
2576         difficult to accidentally change generated files.
2577
2578 Mon Feb 16 22:12:07 2004  Ben Pfaff  <blp@gnu.org>
2579
2580         * frequencies.q: (compare_freq_numeric_a) Compare by frequency,
2581         not bogus a->v.c <=> b->v.c pointer compare.
2582         (compare_freq_alpha_a) Ditto.
2583         (compare_freq_numeric_d) Ditto.
2584         (compare_freq_alpha_d) Ditto.
2585         
2586 Mon Feb 16 22:00:53 2004  Ben Pfaff  <blp@gnu.org>
2587
2588         Changed data_out() to store string data directly into a `union
2589         value''s s member, not indirectly into c.
2590
2591         * crosstabs.q: (output_pivot_table) Use format_short() instead of
2592         data_out().
2593         (table_value_missing) Ditto.
2594         (float_M_suffix) Ditto.
2595         (format_short) New function.
2596
2597         * data-in.h: (data_in_finite_line) Remove inline definition.
2598
2599         * data-list.c: (destroy_dls_var_spec) New function.
2600         (destroy_dls) Rewrite in terms of destroy_dls_var_spec().
2601         (data_list_source_destroy_source) Avoid cast.
2602         (struct repeating_data_trns) New field `id_value'.  Update
2603         comments.
2604         (cmd_repeating_data) Initialize id_value.  Use new
2605         repeating_data_trns_free() for freeing REPEATING DATA
2606         transformations.
2607         (rpd_parse_record) Rewrite support for record ID to be less bogus.
2608         (repeating_data_trns_free) New function.
2609
2610         * data-out.c: (data_out) Change return type to `void' by replacing
2611         error returns by writing a message into the output buffer.
2612         (convert_A) Read from v->s instead of v->c.
2613         (convert_AHEX) Ditto.
2614
2615         * expr-evl.c: Update comment.
2616         (expr_evaluate) Add assertion in OP_STRING case.
2617
2618         * format.h: (macro MAX_FORMATTED_LEN) New macro.
2619
2620         * list.q: (list_cases) Update for new data_out() semantics.
2621
2622         * print.c: (print_trns_proc) Ditto.
2623
2624         * tab.c: (tab_value) Ditto.
2625         (tab_float) Avoid stupid cast.
2626
2627         * var.h: Update comments.
2628         (macro MAX_STRING) New macro.
2629         (macro MAX_ELEMS_PER_VALUE) New macro.
2630
2631         * vars-atr.c: (compare_values) New function.
2632
2633         * vfm.c: (dump_splits) Update for new data_out() semantics.
2634
2635 Mon Feb 16 21:45:47 2004  Ben Pfaff  <blp@gnu.org>
2636
2637         * crosstabs.q: (struct table_entry) Rename v[] to values[].  All
2638         references updated.
2639         (struct crosstab) Rename v[] to vars[].  All references updated.
2640         (hash_table_entry) Replace the hash algorithm and fix a bug at the
2641         same time, which caused the hash value to depend only on a single
2642         value, not all of the variables' values.
2643         
2644 Mon Feb 16 12:49:53 2004  Ben Pfaff  <blp@gnu.org>
2645
2646         Clean up struct dictionary's value_cnt usage.
2647
2648         * dictionary.c: Add a function comment to each function.
2649         (struct dictionary) Rename value_cnt to next_value_idx, which more
2650         accurately reflects its meaning.  All references updated.
2651         (dict_rename_vars) Add assertion.
2652         (dict_get_value_cnt) Rename dict_get_next_value_idx().  All
2653         references updated.
2654         (dict_get_case_size) New function.
2655
2656         * aggregate.c: (create_sysfile) Use dict_get_case_size().
2657
2658         * get.c: (mtf_read_nonactive_records) Ditto.
2659
2660         * sort.c: (allocate_cases) Ditto.
2661         (write_initial_runs) Ditto.
2662         (merge) Ditto.
2663         (merge_once) Ditto.
2664
2665         * vfm.c: (prepare_for_writing) Ditto.
2666         (setup_lag) Ditto.
2667         (lag_case) Ditto.
2668
2669 Mon Feb 16 00:17:55 2004  Ben Pfaff  <blp@gnu.org>
2670
2671         Make vfm.c slightly less grotesque.
2672
2673         * vfm.c: (filter_var) Removed.
2674         (filter_index) Removed.
2675         (FILTERED macro) Removed.
2676         (exclude_this_case) New function.
2677         (process_active_file_write_case) Use exclude_this_case() instead
2678         of FILTERED and inline tests.
2679         (procedure_write_case) Ditto.
2680         (setup_filter) Removed.
2681         (open_active_file) Don't call setup_filter().
2682         (close_active_file) Call dict_get_filter() instead of checking
2683         filter_var.
2684
2685 Mon Feb 16 00:01:53 2004  Ben Pfaff  <blp@gnu.org>
2686
2687         * var.h: (struct variable) Update comments.
2688
2689 Sun Feb 15 23:14:59 2004  Ben Pfaff  <blp@gnu.org>
2690
2691         New functions dict_create_var_assert(), dict_lookup_var_assert().
2692         Converted several dict_*_var()/assert pairs into a single
2693         dict_*_var_assert().
2694
2695         * dictionary.c: (dict_create_var_assert) New function.
2696         (dict_lookup_var_assert) New function.
2697
2698 Sun Feb 15 23:06:08 2004  Ben Pfaff  <blp@gnu.org>
2699
2700         Got rid of "struct long_vec", envector(), devector(), etc.  Added
2701         two members `init', `reinit' to struct variable as a substitute.
2702         
2703         * Makefile.am: (pspp_SOURCES) Removed cases.c, cases.h.
2704         
2705         * cases.c: Removed.
2706
2707         * cases.h: Removed.
2708
2709         * aggregate.c: (parse_aggregate_functions) destvar doesn't need
2710         init.
2711
2712         * autorecode.c: (cmd_autorecode) destvars don't need init.
2713
2714         * compute.c: (lvalue_finalize) Set reinit.
2715
2716         * data-list.c: (fixed_parse_compatible) Don't need init usually.
2717         (dump_fmt_list) Ditto.
2718         (parse_free) Ditto.
2719
2720         * descript.q: (run_z_pass) Don't need init for z-scores.
2721
2722         * dictionary.c: (dict_create_var) Initialize `init', `reinit'
2723         members.
2724         (dict_clone_var) Copy `reinit' member, initialize `init' member.
2725
2726         * glob.c: (init_glob) Remove vec_init() calls.
2727
2728         * inpt-pgm.c: (cmd_end_input_program) Use `reinit', not `left'.
2729         
2730         * loop.c: (internal_cmd_loop) Don't need to call envector().
2731
2732         * numeric.c: (cmd_numeric) Ditto.
2733         (cmd_string) Ditto.
2734         (cmd_leave) Ditto.  Set `init', `reinit' members.
2735
2736         * recode.c: (cmd_recode) Don't need to call envector().
2737
2738         * repeat.c: (internal_cmd_do_repeat) Ditto.
2739
2740         * var.h: (struct variable) Remove `left'.  Add `init', `reinit'.
2741         (force_create_variable) Removed prototype.
2742         (force_dup_variable) Ditto.
2743
2744         * vector.c: (cmd_vector) Don't need to call envector().
2745
2746         * vfm.c: (reinit_sysmis) Removed.
2747         (reinit_blanks) Removed.
2748         (init_zero) Removed.
2749         (init_blanks) Removed.
2750         (process_active_file_write_case) No need to deal with vectors.
2751         Call clear_temp_case().
2752         (vector_initialization) Rewrite to use `init', `reinit'.
2753         (close_active_file) No need to call vec_clear().
2754         (procedure_write_case) Call clear_temp_case().
2755         (clear_temp_case) New function.
2756
2757 Sun Feb 15 20:50:36 2004  Ben Pfaff  <blp@gnu.org>
2758
2759         * pfm-write.c: (bufwrite) Get rid of nasty cast that also invoked
2760         undefined behavior.
2761
2762 Thu Feb 12 23:35:15 2004  Ben Pfaff  <blp@gnu.org>
2763
2764         Add auxiliary argument to procedure() interface.  Associated small
2765         clean-ups of vfm interface.
2766         
2767         * Updated every caller of procedure() and process_active_file() to
2768         reflect modified interface.  Simple, ordinary changes not listed
2769         otherwise below.
2770
2771         * Updated every function that implements struct case_stream's
2772         `read' function to take a write_case_func and a write_case_data.
2773         Also updated every caller of write_case() to instead call them
2774         through these arguments.  In some cases this meant that the extra
2775         args had to be threaded through a couple of extra levels.  This
2776         wasn't difficult or interesting so the details won't be given.
2777
2778         * data-list.c: (struct repeating_data_trns) Add members
2779         `write_case', `wc_data' as kluge.
2780         (read_one_set_of_repetitions) Rename repeating_data_trns_proc and
2781         make non-static.
2782         (repeating_data_set_write_case) New function.
2783
2784         * data-list.h: New file to declare repeating_data_trns_proc() and
2785         repeating_data_set_write_case().
2786
2787         * inpt-pgm.c: (input_program_source_read) Call
2788         repeating_data_set_write_case() for all the REPEATING DATA
2789         transformations, so that they know where to send their cases.
2790         It's a big kluge.  Also kluge in END CASE.
2791         (end_case_trns_proc) Never called anymore, but we still need it,
2792         so just assert(0).
2793
2794         * sort.c: (read_sort_output) Update to match struct case_stream
2795         `read' member.
2796
2797         * vfm.c: (struct write_case_data) New structure.
2798         (proc_func) Removed.
2799         (virt_proc_func) Removed.
2800         (begin_func) Removed.
2801         (virt_begin_func) Removed.
2802         (end_func) Removed.
2803         (write_case) Removed.
2804         (procedure) Added an auxiliary parameter to each function pointer
2805         argument's prototype.  Added an auxiliary data parameter.
2806         Rewrote.
2807         (process_active_file) Ditto.
2808         (process_active_file_write_case) Pass aux data along.
2809         (close_active_file) Ditto.
2810         (procedure_write_case) Ditto.
2811         (SPLIT_FILE_procfunc) Ditto.
2812
2813         * vfm.h: (typedef write_case_data) New.
2814         (typedef write_case_func) New.
2815         (struct case_stream) Add parameters to `read' member prototype.
2816         
2817 Thu Feb 12 19:24:53 WST 2004 John Darrington <john@darrington.wattle.id.au>
2818
2819         * t-test.q:  Added calculations for independent samples. (But no Levene
2820         test yet!)
2821
2822         * Makefile.am: Moved q_sources_c into own variable 
2823
2824 Wed Feb 11 23:56:51 2004  Ben Pfaff  <blp@gnu.org>
2825
2826         Miscellaneous cleanups.
2827         
2828         * Change unused to UNUSED in many source files to reflect modified
2829         pref.h.  Change use of __WIN32__, __MSDOS, __DJGPP__,
2830         __CYGWIN32__, __unix__, and unix not to assume that they're
2831         defined to a nonzero value.  Change use of __attribute__ to use
2832         NO_RETURN or PRINTF_FORMAT instead.
2833         
2834         * alloc.h: Move definitions for local_alloc(), local_free() here
2835         from ../pref.h.orig and simplify.
2836
2837         * expr-evl.c: Instead of working differently based on PAGED_STACK,
2838         use a pool allocator unconditionally.
2839         (CHECK_STRING_SPACE) Removed.
2840         (ALLOC_STRING_SPACE) Removed.
2841         (expr_evaluate) Use e->pool instead of CHECK_STRING_SPACE and
2842         ALLOC_STRING_SPACE.
2843
2844         * expr-opt.c: (dump_expression) Allocate string pool.
2845
2846         * expr-prs.c: (expr_free) Free string pool.
2847
2848         * pool.c: (pool_destroy) This pool must be removed from its
2849         parent's list of gizmos, not from its own.  Use free_all_gizmos().
2850         (pool_clear) New function.
2851         (free_all_gizmos) New function.
2852         (pool_alloc) Use space in empty block after this one if any.
2853         (pool_release) Only empty out blocks, don't actually free() them.
2854
2855         * print.c: Get rid of PAGED_STACK special case by always
2856         dynamically allocating line buffers.
2857         (struct print_trns) Always include the `line' member.
2858         (internal_cmd_print) Always initialize the `line' member.
2859         (alloc_line) Always allocate memory for `line'.
2860         (print_trns_proc) Always initialize buf from `line' member.
2861         (print_trns_free) Always free `line' memory.
2862
2863         * sort.c: (allocate_file_handles) Special-case MS-DOS for mkdir()
2864         call.
2865         
2866 Wed Feb 11 20:33:18 2004  Ben Pfaff  <blp@gnu.org>
2867
2868         * flip.c: Fixed crash from FLIP when a numeric variable is
2869           specified on NEWNAMES and a large value is used, and a couple of
2870           other minor bugs besides.
2871           (struct varname) Make name a 9-character fixed-size array
2872           instead of a 1-character variable size array.
2873           (make_new_var) Allow digits in variable names.
2874           (flip_stream_write) Limit numeric values to 8 characters and
2875           format system missing and very large and small values more
2876           appropriately.
2877
2878 Thu Feb  5 13:19:06 WAST 2004 John Darrington <john@darrington.wattle.id.au>
2879
2880         * command.c: Fixed test on command return status for the correct 
2881           value,  which had been causing a crash under certain invalid input.
2882
2883 Wed Feb  4 15:34:11 WST 2004 John Darrington <john@darrington.wattle.id.au>
2884
2885         * t-test.q: Added calculations for the one sample variant of the T-TEST
2886
2887 Tue Feb  3 20:09:54 2004  Ben Pfaff  <blp@gnu.org>
2888
2889         * tab.c: (render_strip) Fix bug that sometimes caused joined text
2890           in joined cells to be rendered outside box boundaries.
2891
2892 Tue Feb  3 18:56:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
2893
2894         * random.c (rng_create): Fixed seeding so that it gets reseeded after
2895         SET seed=xx has been called.
2896
2897 Mon Jan 19 14:08:09 2004  Ben Pfaff  <blp@gnu.org> 
2898
2899         * random.c (rng_get_double): Fix always-returning-zero bug in my
2900         preferred way, and at the same time make sure rounding doesn't
2901         bite us.
2902
2903 Thu Jan  1 23:16:41 2004  Ben Pfaff  <blp@gnu.org>
2904
2905         * html.c: (change_attributes) Dead code, removed.
2906         (escape_string) Eliminate code to call change_attributes() that
2907         never actually called it.
2908         (output_tab_table) Get rid of dependence on tab_hit
2909         and struct tab_joined_cell's hit member, which are abominations.
2910
2911         * tab.c: (tab_output_text) Don't call
2912         d->class->text_set_font_by_name if it's a null pointer.
2913         (macro UNROLL_LOOP) Eliminate.
2914         (macro UNROLL_3_LOOPS) Eliminate.
2915         (tabi_render) Rewrite not to use the above macros.
2916
2917 Thu Jan  1 23:09:07 2004  Ben Pfaff  <blp@gnu.org>
2918
2919         Start working on a new output driver system, one that doesn't suck
2920         so much, by adding a "device-independent" output driver.  The idea
2921         is to write out only a single output stream, then use separate
2922         processes to translate them into whatever formats we want.  This
2923         is similar to how "groff" works with its various output drivers
2924         (grops, grotty, grodvi, ...).
2925         
2926         * Makefile.am: (pspp_SOURCES) Add devind.c, devind.h.
2927
2928         * list.q: (write_all_headers) Stub out devind class.
2929         (clean_up) Ditto.
2930         (determine_layout) Ditto.
2931         (list_cases) Ditto.
2932
2933         * output.c: (outp_init) Add devind class.
2934
2935         * devind.c: New file.
2936
2937         * devind.h: New file.
2938
2939 Thu Jan  1 23:08:14 2004  Ben Pfaff  <blp@gnu.org>
2940
2941         * frequencies.q: (hash_value_alpha) Fixed up the previous change
2942         to use the proper string length.
2943
2944 Wed Dec 31 16:27:33 WAST 2003 John Darrington <john@darrington.wattle.id.au>
2945
2946         * Fixed bug where FREQ would crash on alpha values
2947
2948 Tue Dec 30 22:42:57 2003  Ben Pfaff  <blp@gnu.org>
2949
2950         * Removed bletcherous alloca() workarounds for AIX from top of
2951         many files.  AIX can use the alternative alloca() implementation
2952         instead.
2953
2954 Tue Dec 30 22:35:16 2003  Ben Pfaff  <blp@gnu.org>
2955
2956         * ascii.c: (ascii_option) Fix implementation of headers option.
2957
2958 Tue Dec 30 22:32:53 2003  Ben Pfaff  <blp@gnu.org>
2959
2960         * ascii.c: Add a "squeeze" option to the ASCII driver to squeeze
2961         multiple blank lines into one.
2962         (struct ascii_driver_ext) Add squeeze_blank_lines option.
2963         (ascii_preopen_driver) Initialize squeeze_blank_lines.
2964         (static var option_tab) Add squeeze entry.
2965         (ascii_option) Set squeeze_blank_lines.
2966         (output_lines) Implement squeezing blank lines.
2967
2968 Wed Dec 31 07:19:46 WST 2003 John Darrington <john@darrington.wattle.id.au>
2969
2970         * Removed redundant code from output.h
2971
2972 Sat Dec 27 22:17:52 2003  Ben Pfaff  <blp@gnu.org>
2973
2974         Dictionary classes: each variable is "ordinary", "system", or
2975         "scratch".
2976
2977         * var.h: (enum dict_class) New enum.
2978
2979         * vars-prs.c: (dict_class_from_id) New function.
2980         (dict_class_to_name) New function.
2981
2982 Sat Dec 27 22:16:06 2003  Ben Pfaff  <blp@gnu.org>
2983
2984         * var.h: (struct freq_tab_set) Removed (not used).
2985
2986 Sat Dec 27 22:15:21 2003  Ben Pfaff  <blp@gnu.org>
2987
2988         * value-labels.c: (val_labs_destroy) vls needs to be freed too.
2989
2990 Sat Dec 27 22:10:49 2003  Ben Pfaff  <blp@gnu.org>
2991
2992         * stats.c: (hypercube) Rename pow4().  All references updated.
2993
2994 Sat Dec 27 22:05:49 2003  Ben Pfaff  <blp@gnu.org>
2995
2996         * rename-vars.c: (cmd_rename_variables) Rewritten.
2997         (compare_name) Removed.
2998
2999 Sat Dec 27 22:03:51 2003  Ben Pfaff  <blp@gnu.org>
3000
3001         var_set feature, and code taking advantage of it.
3002         
3003         * crosstabs.q: (static var var_dict) Removed.
3004         (static var variables) New variable.
3005         (static var variables_cnt) New variable.
3006         (cmd_crosstabs) Free variables instead of var_dict.
3007         (internal_cmd_crosstabs) Initialize and use variables,
3008         variables_cnt instead of var_dict.
3009         (free_var_dict) Removed.
3010         (crs_custom_tables) Use var_set instead of a copied dictionary.
3011         (crs_custom_variables) Set up variables, variables_cnt instead of
3012         var_dict.
3013         [DEBUGGING] (debug_print) Ditto.
3014
3015         * means.q: (mns_custom_tables) Use var_set instead of a copied
3016         dictionary.
3017
3018         * vars-prs.c: (parse_vs_variable) New function.
3019         (parse_dict_variable) Rewritten.
3020         (parse_variable) Rewritten.
3021         (parse_variables) Renamed parse_var_set_vars(), rewritten.
3022         (parse_variables) New function in terms of parse_var_set_vars().
3023         Now requires its first argument to be non-null.  All references
3024         that passed a null pointer updated to pass default_dict instead.
3025         (macro id_dict) Removed.
3026         (parse_DATA_LIST_vars) Add assertions.
3027         (parse_mixed_vars) Ditto.
3028         (struct var_set) New structure.
3029         (var_set_get_cnt) New function.
3030         (var_set_get_var) New function.
3031         (var_set_lookup_var) New function.
3032         (var_set_destroy) New function.
3033         (dict_var_set_get_cnt) New function.
3034         (dict_var_set_get_var) New function.
3035         (dict_var_set_lookup_var) New function.
3036         (dict_var_set_destroy) New function.
3037         (var_set_create_from_dict) New function.
3038         (struct array_var_set) New structure.
3039         (array_var_set_get_cnt) New function.
3040         (array_var_set_get_var) New function.
3041         (array_var_set_lookup_var) New function.
3042         (array_var_set_destroy) New function.
3043         (var_set_create_from_array) New function.
3044
3045         * q2c.c: (dump_parser) Use parse_variables(default_dict, ...)
3046         instead of parse_variables(NULL, ...) in output code.
3047
3048 Sat Dec 27 21:38:53 2003  Ben Pfaff  <blp@gnu.org>
3049
3050         Change inp_init from a 2-bit vector to an ordinary array.
3051         Initialize it all in cmd_end_input_program() instead of in
3052         create_variable().
3053
3054         * inpt-pgm.c: (enum value_init_type) New enum.
3055         (global var inp_init) Change to `enum value_init_type *', make
3056         static.
3057         (inp_init_size) Removed.
3058         (inp_nval) Change to `size_t', make static.
3059         (cmd_input_program) Don't initialize inp_init or inp_init_size.
3060         (cmd_end_input_program) Initialize inp_init, inp_nval.
3061         (init_case) Rewrite.
3062         (clear_case) Rewrite.
3063
3064         * inpt-pgm.h: Removed.
3065
3066 Sat Dec 27 21:36:38 2003  Ben Pfaff  <blp@gnu.org>
3067
3068         * hash.c: (hsh_hash_bytes) Use Fowler-Noll-Vo hash instead of
3069         Colin Plumb hash.  It is simpler and should better resist
3070         collisions.
3071         (hsh_hash_string) Ditto.
3072
3073 Sat Dec 27 21:34:57 2003  Ben Pfaff  <blp@gnu.org>
3074
3075         * get.c: (export_write_case_func) Remove debug printing code.
3076
3077 Sat Dec 27 21:11:09 2003  Ben Pfaff  <blp@gnu.org>
3078
3079         * get.c: (cmd_save_internal) Rename parameter.  Use &t->h instead
3080         of cast.
3081         (save_write_case_func) Use &trns->h instead of cast.
3082         (cmd_export) Use &t->h instead of cast.
3083
3084 Sat Dec 27 20:57:42 2003  Ben Pfaff  <blp@gnu.org>
3085
3086         Moved vectors into the dictionary.
3087
3088         * var.h: (struct vector) Moved here from vector.h.  `index' member
3089         renamed `idx', `v' renamed `var', `nv' renamed `cnt'.  All
3090         references updated.
3091         
3092         * vector.h: Removed.
3093
3094         * vector.c: (global var vec) Removed.
3095         (global var nvec) Removed.
3096         (cmd_vector) Rewritten.
3097         (find_vector) Removed.
3098
3099         * dictionary.c: (dict_create_vector) New function.
3100         (dict_get_vector) New function, replaces reading global vec[]
3101         array.
3102         (dict_get_vector_cnt) New function, replaces reading global nvec
3103         variable.
3104         (dict_lookup_vector) New function, replaces find_vector().
3105         (dict_clear_vectors) New function.
3106
3107 Sat Dec 27 20:54:01 2003  Ben Pfaff  <blp@gnu.org>
3108
3109         Start to move away from `struct variable' p `union' member to void
3110         * aux member.
3111
3112         * var.h: (struct variable) Add `aux' member.
3113
3114 Sat Dec 27 20:36:25 2003  Ben Pfaff  <blp@gnu.org>
3115
3116         Get rid of struct variable `foo' member.
3117
3118         * frequencies.q: (internal_cmd_frequencies) Use p.frq.used instead
3119         of foo.
3120         (frq_custom_variables) Ditto.
3121         (frq_custom_grouped) Ditto.
3122
3123         * get.c: (struct save_trns) Change `var' member from `int *' to
3124         `struct variable **'.
3125         (cmd_save_internal) Use aux instead of foo.
3126         (save_trns_proc) Use revised `var' member.
3127         (static var mtf_seq_no) Renamed mtf_seq_num.
3128         (static var mtf_seq_nums) New static var.
3129         (cmd_match_files) Initialize mtf_seq_nums.
3130         (mtf_free) Free mtf_seq_nums.
3131         (mtf_processing) Use mtf_seq_nums instead of foo.
3132         (mtf_merge_dictionary) No need to initialize mv->foo.
3133         (cmd_export) Use aux instead of foo.  Use revised `var' member.
3134         (mns_custom_tables) Don't use foo to check for duplicates, that's
3135         what PV_NO_DUPLICATE is for.
3136
3137         * var.h: (struct variable) Remove `foo' member.
3138         (struct frequencies_proc) New member.
3139         
3140 Sat Dec 27 19:46:13 2003  Ben Pfaff  <blp@gnu.org>
3141
3142         Clean up COMPUTE and IF.
3143
3144         * compute.c: More or less rewrite the darn thing.
3145         (struct compute_trns) Rename and reorder and add and delete
3146         members.
3147         (cmd_compute) Rewrite.
3148         (compute_num) Make conditional on test expression.  Now used for
3149         both COMPUTE and IF.
3150         (compute_num_vec) Ditto.
3151         (compute_str) Ditto.
3152         (compute_str_vec) Ditto.
3153         (cmd_if) Rewrite.
3154         (if_num) Removed.
3155         (if_num_vec) Removed.
3156         (if_str) Removed.
3157         (if_str_vec) Removed.
3158         (parse_target_expression) Renamed parse_rvalue_expression(),
3159         rewritten.
3160         (new_trns) Renamed compute_trns_create(), rewritten.
3161         (delete_trns) Removed.
3162         (free_trns) Renamed compute_trns_free(), rewritten.
3163         (struct lvalue) New structure.
3164         (parse_var_or_vec) Renamed lvalue_parse(), rewritten.
3165         (lvalue_get_type) New function.
3166         (lvalue_is_vector) New function.
3167         (lvalue_finalize) New function.
3168         (lvalue_destroy) New function.
3169         
3170 Sat Dec 27 19:44:14 2003  Ben Pfaff  <blp@gnu.org>
3171
3172         * command.def: Disallow MODIFY VARS in input mode, so that
3173         variables can't get dropped and confuse cmd_end_input_program()'s
3174         attempt to fill inp_init[].
3175         
3176         * modify-vars.c: (static var forward_positional_ordering) New
3177         variable.
3178         (struct var_modification) Entirely changed.
3179         (rearrange_dict) Interface changed, rewritten.
3180         (cmd_modify_vars) Deal with modified struct var_modification, much
3181         rewritten.
3182         (struct var_renaming) New structure.
3183         (compare_var_renaming_by_new_name) New function.
3184         (validate_var_modification) New function.
3185
3186         * var.h: (struct modify_vars_proc) Removed.
3187         (struct variable) Removed member p.mfv.
3188
3189 Sat Dec 27 19:40:26 2003  Ben Pfaff  <blp@gnu.org>
3190
3191         Make EVALUATE a valid command whether we're debugging or not, so
3192         that `make check' can succeed regardless of whether debugging is
3193         turned on.
3194         
3195         * command.def: [GLOBAL_DEBUGGING] Drop the #if.
3196
3197         * compute.c: [GLOBAL_DEBUGGING] (cmd_evaluate) Drop the #if.
3198
3199 Sat Dec 27 19:34:40 2003  Ben Pfaff  <blp@gnu.org>
3200
3201         * apply-dict.c: (cmd_apply_dictionary) Replace a ghastly switch
3202         statement by a simple if test.
3203
3204         * dfm.c: (dfm_get_record) Add assertion.
3205
3206 Sat Dec 27 17:51:26 2003  Ben Pfaff  <blp@gnu.org>
3207
3208         For each file x.c, move #include "x.h" to the very top of the
3209         include list, to catch x.h failing to include the proper headers.
3210
3211 Sat Dec 27 17:50:19 2003  Ben Pfaff  <blp@gnu.org>
3212
3213         * algorithm.c: (find) New function.
3214         (remove_equal) New function.
3215         (set_difference) New function.
3216         (adjacent_find_equal) New function.
3217         [TEST_UNIQUE] Removed test case.
3218         (copy_if) Find end test.
3219
3220 Sat Dec 27 17:42:45 2003  Ben Pfaff  <blp@gnu.org>
3221
3222         * dictionary.c: (dict_get_case_weight) New convenience function.
3223
3224         * aggregate.c: (accumulate_aggregate_info) Use
3225         dict_get_case_weight().
3226
3227         * frequencies.q: (calc_general) Ditto.
3228         (calc_integer) Ditto.
3229         (calc) Ditto.
3230
3231         * t-test.q: (groups_calc) Ditto.
3232         (z_calc) Ditto.
3233
3234 Sat Dec 27 17:29:45 2003  Ben Pfaff  <blp@gnu.org>
3235
3236         * glob.c: (global var default_dict) Change from `struct
3237         dictionary' to `struct dictionary *'.  All references changed.
3238         (init_glob) Initialize default_dict with dict_create().
3239
3240 Sat Dec 27 17:06:06 2003  Ben Pfaff  <blp@gnu.org>
3241
3242         struct dictionary now made opaque.  All related functions:
3243
3244         * get.c: (rename_variables) Removed.
3245         (dict_delete_run) Removed.
3246         
3247         * temporary.c: (copy_variable) Removed.
3248         (new_dictionary) Removed.
3249         (save_dictionary) Removed.
3250         (restore_dictionary) Removed.
3251         (free_dictionary) Removed.
3252
3253         * vars-atr.c: (clear_default_dict) Removed.
3254         (find_variable) Removed.
3255         (find_dict_variable) Removed.
3256         (create_variable) Removed.
3257         (delete_variable) Removed.
3258         (common_init_stuff) Removed.
3259         (init_variable) Removed.  Updating of inp_init moved into
3260         cmd_end_input_program().
3261         (replace_variable) Removed.
3262         (rename_variable) Removed.
3263         (clear_variable) Removed.
3264         (dup_variable) Removed.
3265
3266         * vars-prs.c: (is_varname) Removed.
3267         (is_dict_varname) Removed.
3268         (fill_all_vars) Removed.
3269
3270         * vector.c: (find_vector) Removed.
3271
3272         * weight.c: (stop_weighting) Removed.
3273
3274         * dictionary.c: New file.
3275         (dict_create) New, replaces new_dictionary().
3276         (dict_clone) New, replaces save_dictionary() and
3277         restore_dictionary().
3278         (dict_clear) New, replaces clear_default_dict().
3279         (dict_destroy) New, replaces free_dictionary().
3280         (dict_get_var_cnt) New function, replaces references to
3281         dict->nvar.
3282         (dict_get_var) New function, replaces references to dict->var[i].
3283         (dict_get_vars) New function, replaces fill_all_vars().
3284         (dict_create_var) New, replaces create_variable().  Interface
3285         drops `type' parameter, using a zero `width' to designate numeric.
3286         (dict_clone_var) New, replaces dup_variable().
3287         (dict_rename_var) New, replaces rename_variable().
3288         (dict_lookup_var) New, replaces find_variable(),
3289         find_dict_variable(), is_varname().
3290         (dict_contains_var) New function.
3291         (compare_variable_dblptrs) New function.
3292         (dict_delete_var) New function, replaces clear_variable().
3293         (dict_delete_vars) New function, replaces dict_delete_run().
3294         (dict_reorder_vars) New function.
3295         (dict_rename_vars) New function, replaces rename_variables().
3296         (dict_get_weight) New function, replaces reading dict->weight_var.
3297         (dict_set_weight) New function, replaces writing dict->weight_var
3298         or calling stop_weight(dict).
3299         (dict_get_filter) New function, replaces reading dict->filter_var.
3300         (dict_set_filter) New function, replaces writing dict->filter_var.
3301         (dict_get_case_limit) New function, replaces reading dict->N.
3302         (dict_set_case_limit) New function, replaces writing dict->N.
3303         (dict_get_value_cnt) New function, replaces reading dict->nval.
3304         (dict_compact_values) New function, replaces a loop that was
3305         replicated in several places.
3306         (dict_get_split_vars) New function, replaces reading dict->splits.
3307         (dict_get_split_cnt) New function, replaces reading
3308         dict->n_splits.
3309         (dict_set_split_vars) New function, replaces writing dict->splits.
3310         (dict_get_label) New function, replaces reading dict->label.
3311         (dict_set_label) New function, replaces writing dict->label.
3312         (dict_get_documents) New function, replaces reading
3313         dict->documents.
3314         (dict_set_documents) New function, replaces writing
3315         dict->documents.
3316         
3317         All references to above functions updated.
3318         
3319         * aggregate.c: (cmd_aggregate) Copy file label and documents from
3320         old dictionary to new by hand, because dict_create() can't do it
3321         itself.  Use dict_set_documents(), dict_set_split_vars().
3322
3323         * temporary.c: (cancel_temporary) Also set temp_dict to NULL after
3324         calling dict_destroy().
3325
3326         * data-list.c: (dls_var_spec) Remove `type' member, replace by
3327         `width'.
3328         (fixed_parse_compatible) Some slightly nontrivial changes for
3329         dict_create_var().
3330         (dump_fmt_list) Ditto.
3331         (parse_free) Ditto.
3332
3333         * file-type.c: (create_col_var) Ditto.
3334
3335         * get.c: (cmd_get) Use dict_compact_values() instead of a loop.
3336         (trim_dictionary) Use dict_delete_vars(), dict_reorder_vars().
3337         (rename_variables) Use dict_rename_vars().
3338         (mtf_merge_dictionary) Use dict_get_documents(),
3339         dict_set_documents(), dict_compact_values().
3340
3341         * pfm-read.c: (read_variables) Deal with changes to weighting.
3342
3343         * q2c.c: (dump_parser) Use dict_lookup_var() instead of
3344         is_varname() in output code.
3345
3346         * sfm-read.c: (read_header) Use dict_create(), dict_set_label(),
3347         other dictionary functions.
3348
3349         * title.c: (add_document_line) Use dict_get_documents(),
3350         dict_set_documents().
3351
3352         * vars-atr.c: (discard_variables) Use dict_clear(default_dict),
3353         reset default_handle by hand.  dict_clear() will clear vectors so
3354         there's no need for that by hand.
3355
3356         * vfm.c: (close_active_file) Move call to finish_compaction()
3357         earlier, so that we can do the compaction as a single step using
3358         dict_compact_values().  Use dict_clear_vectors().
3359         (finish_compaction) Use dict_delete_var(), dict_compact_values().
3360                 
3361         Some functions don't have replacements:
3362
3363         * vars-atr.c: (force_create_variable) Removed.  All references
3364         updated to dict_create_var() followed by an assertion.
3365         (force_dup_variable) Removed.  All references updated to
3366         dict_clone_var() followed by an assertion.
3367         
3368         * weight.c: (update_weighting) Removed.  No longer necessary, so
3369         all references removed.
3370
3371 Sat Dec 27 16:43:01 2003  Ben Pfaff  <blp@gnu.org>
3372
3373         Clean up AGGREGATE.
3374         
3375         * aggregate.c: Eliminate separation of weighted and unweighted
3376         case.  It made the code too obscure and I doubt it was actually
3377         faster.  Instead, all code uses the "weighted" code, because
3378         that's a generalization of the "unweighted" code.
3379         (FWEIGHT) Removed.
3380         (FOPTIONS) Ditto.
3381         (parse_aggregate_functions) No need to set FWEIGHT.
3382         (accumulate_aggregate_info) Get rid of FWEIGHT cases.
3383         (dump_aggregate_info) Ditto.
3384         (initialize_aggregate_info) No need for special plain_function
3385         that gets rid of FWEIGHT option.
3386
3387         * aggregate.c: Get rid of approximations.
3388         (accumulate_aggregate_info) Don't use approx_gt(), approx_lt(),
3389         approx_in_range().
3390         (aggregate_single_case) Don't use approx_ne().
3391
3392 Sat Dec 27 16:19:36 2003  Ben Pfaff  <blp@gnu.org>
3393
3394         * ascii.c (ascii_line_width): Dead code, removed.
3395
3396         * postscript.c (ps_line_width): Ditto.
3397
3398         * q2c.c (xrealloc): Ditto.
3399
3400         * count.c (internal_cmd_count): Ditto.
3401
3402         * means.q (validate_dependent_endpoint): Ditto.
3403
3404         * set.q: (cmd_gset) Ditto.
3405
3406         * weight.c: [0] (weight_trns_proc) Ditto.
3407
3408 Sat Dec 27 16:18:16 2003  Ben Pfaff  <blp@gnu.org>
3409
3410         Make the code -Wmissing-prototypes clean.
3411
3412         * Makefile.am (version.c): Add #include "version.h".
3413         
3414         * ascii.c: (ascii_open_global) Make static.
3415         (ascii_close_page) Ditto.
3416         (ascii_font_sizes) Ditto.
3417         (ascii_postopen_driver) Ditto.
3418         (ascii_close_driver) Ditto.
3419         (ascii_option) Ditto.
3420         (ascii_open_page) Ditto.
3421         (ascii_line_horz) Ditto.
3422         (ascii_line_vert) Ditto.
3423         (ascii_line_intersection) Ditto.
3424         (ascii_box) Ditto.
3425         (ascii_polyline_begin) Ditto.
3426         (ascii_polyline_point) Ditto.
3427         (ascii_polyline_end) Ditto.
3428         (ascii_text_set_font_by_name) Ditto.
3429         (ascii_text_set_font_by_position) Ditto.
3430         (ascii_text_set_font_by_family) Ditto.
3431         (ascii_text_get_font_name) Ditto.
3432         (ascii_text_get_font_family) Ditto.
3433         (ascii_text_set_size) Ditto.
3434         (ascii_text_get_size) Ditto.
3435         (ascii_text_metrics) Ditto.
3436         (ascii_text_draw) Ditto.
3437         (ascii_close_page) Ditto.
3438
3439         * cmdline.h: New header for parse_command_line().  Used where
3440         needed.
3441
3442         * command.c: Move prototypes for cmd_*() functions to command.h.
3443
3444         * command.h: Prototypes for cmd_*() functions moved here from
3445         command.c.
3446
3447         * crosstabs.q: (gamma_int) Ditto.
3448
3449         * file-handle.h: Add fh_init_files() prototype.
3450         
3451         * getline.c: (welcome) Ditto.
3452
3453         * glob.h: New header for init_glob().  Used where appropriate.
3454
3455         * hash.c: (comparison_helper) Ditto.
3456
3457         * html.c: (html_open_global) Ditto.
3458         (html_close_global) Ditto.
3459         (html_preopen_driver) Ditto.
3460         (html_postopen_driver) Ditto.
3461         (html_close_driver) Ditto.
3462         (html_option) Ditto.
3463         (html_open_page) Ditto.
3464         (html_close_page) Ditto.
3465         (html_submit) Ditto.
3466
3467         * inpt-pgm.c: (input_program_source_read) Ditto.
3468
3469         * output.c: (find_defn_value) Ditto.
3470         (destroy_list) Ditto.
3471
3472         * pfm-read.c: (read_int) Ditto.
3473
3474         * postscript.c: (ps_open_global) Ditto.
3475         (ps_close_global) Ditto.
3476         (ps_font_sizes) Ditto.
3477         (ps_preopen_driver) Ditto.
3478         (ps_postopen_driver) Ditto.
3479         (ps_close_driver) Ditto.
3480         (ps_option) Ditto.
3481         (ps_open_page) Ditto.
3482         (ps_close_page) Ditto.
3483         (ps_line_horz) Ditto.
3484         (ps_line_vert) Ditto.
3485         (ps_line_intersection) Ditto.
3486         (ps_box) Ditto.
3487         (ps_polyline_begin) Ditto.
3488         (ps_polyline_point) Ditto.
3489         (ps_polyline_end) Ditto.
3490         (ps_text_set_font_by_name) Ditto.
3491         (ps_text_set_font_by_position) Ditto.
3492         (ps_text_set_font_family) Ditto.
3493         (ps_text_get_font_name) Ditto.
3494         (ps_text_get_font_family) Ditto.
3495         (ps_text_set_size) Ditto.
3496         (ps_text_get_size) Ditto.
3497         (ps_text_metrics) Ditto.
3498         (ps_text_draw) Ditto.
3499
3500         * q2c.c: (finish_up) Ditto.
3501         (xmalloc) Ditto.
3502         (xstrdup) Ditto.
3503         (get_buffer) Ditto.
3504         (st_lower) Ditto.
3505         (st_upper) Ditto.
3506         (skip_ws) Ditto.
3507         (get_line) Ditto.
3508         (add_symbol) Ditto.
3509         (find_symbol) Ditto.
3510         (lex_get) Ditto.
3511         (force_id) Ditto.
3512         (force_string) Ditto.
3513         (match_id) Ditto.
3514         (match_token) Ditto.
3515         (skip_token) Ditto.
3516         (parse) Ditto.
3517         (parse_setting) Ditto.
3518         (parse_specifier) Ditto.
3519         (parse_specifiers) Ditto.
3520         (parse_subcommand) Ditto.
3521         (dump_specifier_vars) Ditto.
3522         (is_keyword) Ditto.
3523         (make_identifier) Ditto.
3524         (dump_declarations) Ditto.
3525         (dump_specifier_init) Ditto.
3526         (dump_vars_init) Ditto.
3527         (make_match) Ditto.
3528         (dump_specifier_parse) Ditto.
3529         (dump_subcommand) Ditto.
3530         (dump_parser) Ditto.
3531         (dump_header) Ditto.
3532         (dump_free) Ditto.
3533         (recognize_directive) Ditto.
3534
3535         * recode.c: (string_to_long) Ditto.
3536
3537         * repeat.c: (find_DO_REPEAT_substitution) Ditto.
3538
3539         * repeat.h: New header for perform_DO_REPEAT_substitutions, used
3540         where appropriate.
3541
3542         * sort.c: (sort_stream_read) Ditto.
3543         (sort_stream_mode) Ditto.
3544         
3545 Fri Dec 19 23:35:04 2003  Ben Pfaff  <blp@gnu.org>
3546
3547         * algorithm.c (binary_search): Fix comparison.
3548
3549 Fri Dec 19 23:27:45 2003  Ben Pfaff  <blp@gnu.org>
3550
3551         * algorithm.c: (binary_search) Fix assertion.
3552
3553 Fri Dec 19 21:31:48 2003  Ben Pfaff  <blp@gnu.org>
3554
3555         * sysfile-info.c: (compare_vectors_by_name) Rewrite.
3556
3557 Fri Dec 19 21:30:24 2003  Ben Pfaff  <blp@gnu.org>
3558
3559         * sort.c: (compare_case_lists) Rewrite.
3560
3561 Fri Dec 19 16:44:22 2003  Ben Pfaff  <blp@gnu.org>
3562
3563         * quicksort.c: Removed (not used).
3564
3565         * quicksort.h: Removed (not used).
3566
3567         * sort.c: Removed blp_quicksort() prototype.
3568
3569 Fri Dec 19 16:42:13 2003  Ben Pfaff  <blp@gnu.org>
3570
3571         * postscript.c: (int_2_compare) Rewrite.
3572         (compare_line) Rewrite.
3573
3574 Fri Dec 19 16:38:35 2003  Ben Pfaff  <blp@gnu.org>
3575
3576         * matrix-data.c (compare_factors) Use lexicographical_compare()
3577         algorithm.
3578         (compare_doubles) New function.
3579         
3580         * algorithm.c: (lexicographical_compare) New algorithm.
3581
3582 Fri Dec 19 16:23:45 2003  Ben Pfaff  <blp@gnu.org>
3583
3584         * matrix-data.c (compare_variables_by_mxd_vartype): Rewrite.
3585
3586 Fri Dec 19 15:54:45 2003  Ben Pfaff  <blp@gnu.org>
3587
3588         * expr-prs.c: (cmp_func) Removed.
3589         (parse_function) Use binary_search() algorithm.
3590         (compare_functions) New function.
3591         (init_func_tab) Use sort() algorithm.
3592
3593         * algorithm.c: (binary_search) New algorithm.
3594
3595 Fri Dec 19 15:50:45 2003  Ben Pfaff  <blp@gnu.org>
3596
3597         * descript.q: (display) Use sort() algorithm instead of qsort().
3598         (compare_func) Removed.
3599         (descriptives_compare_variables) New function.
3600
3601 Fri Dec 19 15:08:38 2003  Ben Pfaff  <blp@gnu.org>
3602
3603         Get rid of AVL trees.  Hashes are more appropriate for everything
3604         PSPP does.
3605
3606         * Makefile.am: (pspp_SOURCES) Remove avl.c, avl.h.
3607         
3608         * avl.c: Removed.
3609
3610         * avl.h: Removed.
3611
3612 Fri Dec 19 14:33:31 2003  Ben Pfaff  <blp@gnu.org>
3613
3614         Much code can be clarified by using C++ STL-like algorithms.  Not
3615         all uses of these algorithms are listed below, only the ones where
3616         the change to an algorithm was the only change of interest.
3617         
3618         * Makefile.am: (pspp_SOURCES) Add algorithm.c, algorithm.h.
3619         
3620         * algorithm.c: New file.
3621
3622         * algorithm.h: New file.
3623
3624         * modify-vars.c: (static var forward) Removed.
3625         (static var positional) Removed.
3626         (compare_variables) Removed.
3627         (struct ordering) New.
3628         (cmd_modify_vars) Use sort() algorithm.
3629         (compare_variables_given_ordering) New function.
3630         (rearrange_dict) Use sort() algorithm.
3631
3632         * sysfile-info.c: (cmd_display) Use sort() algorithm.
3633         (cmp_var_by_name) Removed.
3634
3635 Fri Dec 19 14:26:17 2003  Ben Pfaff  <blp@gnu.org>
3636
3637         Make file handles use a hash table.
3638         
3639         * file-handle.q: (files) Change to hash table, make static.
3640         (cmd_file_handle) Use hash table functions.
3641         (fh_get_handle_by_filename) Ditto.
3642         (fh_get_handle_by_name) Ditto.
3643         (hash_file_handle) New function.
3644         (cmp_file_handle) Rewrite.
3645         (fh_init_files) Use hash table functions.
3646
3647 Fri Dec 19 14:24:38 2003  Ben Pfaff  <blp@gnu.org>
3648
3649         Clean up FREQUENCIES.
3650         
3651         * Makefile.am: (pspp_SOURCES) Remove frequencies.g.
3652
3653         * frequencies.q: Remove a lot of old #if'd out code at the end.
3654         (internal_cmd_frequencies) Use calc() instead of calc_no_weight()
3655         or calc_weight().  Initialize percentile_values.
3656         (calc) New function based on calc_weight() from frequencies.g.
3657         (precalc) Use hash functions.
3658         (static var comparison_func) Removed.
3659         (static var comparison_param) Removed.
3660         (comparison_helper) Removed.
3661         (get_freq_comparator) New function.
3662         (not_missing) New function.
3663         (add_freq) Removed.
3664         (postprocess_freq_tab) Use hash table functions, algorithms,
3665         get_freq_comparator().  Rewrite.
3666         (cleanup_freq_tab) Rephrase.
3667         (add_percentile) Clean up spacing.
3668         (hash_value_numeric) New function.
3669         (hash_value_alpha) New function.
3670         (compare_value_numeric_a) Rewrite.
3671         (compare_value_alpha_a) Rewrite.
3672         (compare_value_numeric_d) Rewrite.
3673         (compare_value_alpha_d) Rewrite.
3674         (compare_freq_numeric_a) Rewrite.
3675         (compare_freq_alpha_a) Rewrite.
3676         (compare_freq_numeric_d) Rewrite.
3677         (compare_freq_alpha_d) Rewrite.
3678         (calc_stats) Clean up mode, percentiles, max.
3679         (dump_statistics) Clean up spacing.
3680         
3681         * frequencies.g: Removed.
3682
3683         * var.h: (struct freq_tab) Change `data' to hash table.
3684
3685 Fri Dec 19 14:15:46 2003  Ben Pfaff  <blp@gnu.org>
3686
3687         * file-handle.h: Remove declaration of global variable `files',
3688         which wasn't used anywhere.
3689
3690         * postscript.c: (add_encoding) Remove superfluous cast.
3691         (line) Ditto.
3692
3693         * sfm-read.c: [linux] (bswap_int32) Drop ntohl() non-portable
3694         version.
3695
3696         * temporary.c: [0] (display_tree) Removed.
3697
3698 Fri Dec 19 14:13:04 2003  Ben Pfaff  <blp@gnu.org>
3699
3700         Implement a new random number generator based on the alleged RC4
3701         algorithm.
3702
3703         * expr-evl.c: (expr_evaluate) Use rng_get_double_normal() instead
3704         of rand_normal().
3705
3706         * random.c: [!HAVE_GOOD_RANDOM] (real_rand) Removed.
3707         [!HAVE_GOOD_RANDOM] (real_srand) Removed.
3708         (macro k) Removed.
3709         (static var V[]) Removed.
3710         (static var Y) Removed.
3711         (static var X2) Removed.
3712         (setup_randomize) Removed.
3713         (shuffle) Removed.
3714         (rand_uniform) Removed.
3715         (rand_normal) Removed.
3716         (struct rng) New structure.
3717         (rng_create) New function.
3718         (rng_destroy) New function.
3719         (swap_byte) New static function.
3720         (rng_seed) New function.
3721         (rng_get_bytes) New function.
3722         (rng_get_int) New function.
3723         (rng_get_unsigned) New function.
3724         (rng_get_double) New function.
3725         (rng_get_double_normal) New function.
3726         (pspp_rng) New function.
3727
3728         * random.h: Sync up to random.c.
3729
3730         * sample.c: (struct sample_trns) Make `frac' unsigned and a
3731         fraction of UINT_MAX, not 65536.
3732         (cmd_sample) Use rng_get_unsigned(), rng_get_double(), UINT_MAX
3733         fraction.
3734
3735         * vfm.c: (open_active_file) No need to call setup_randomize() any
3736         longer.
3737
3738 Fri Dec 19 12:05:56 2003  Ben Pfaff  <blp@gnu.org>
3739
3740         Change dictionary name indexes to use hash tables instead of AVL
3741         trees.
3742
3743         * crosstabs.q: (free_var_dict) Use hash tables.
3744         (crs_custom_tables) Ditto.
3745         (calc_general) Ditto.
3746         (compare_table_entry) Rewrite.
3747         (enum_var_values) Reorder parameters.  All references updated.
3748         Rewrite.
3749
3750         * get.c: (rename_variable) Use hash tables.
3751         (mtf_merge_dictionary) Ditto.
3752
3753         * glob.c: (init_glob) Use hash tables.
3754         (cmp_variable) Removed.
3755
3756         * means.q: (mns_custom_tables) Use hash tables.
3757
3758         * modify-vars.c: (rearrange_dict) Use hash tables.
3759
3760         * rename-vars.c: (cmd_rename_variables) Use hash tables.
3761
3762         * sfm-read.c: (read_header) Use hash tables.
3763         (read_variables) Ditto.
3764
3765         * temporary.c: (new_dictionary) Use hash tables.
3766         (save_dictionary) Ditto.
3767         (restore_dictionary) Ditto.
3768
3769         * var.h: (struct dictionary) Change AVL tree `var_by_name' into
3770         hash table `name_tab'.
3771
3772         * vars-atr.c: [DEBUGGING] (dump_one_var_node) Removed.
3773         [DEBUGGING] (dump_var_tree) Removed.
3774         (find_variable) Use hash tables.
3775         (find_dict_variable) Ditto.
3776         (common_init_stuff) Ditto.
3777         (rename_variable) Ditto.
3778         (clear_variable) Ditto.  Also, remove debug code.
3779         (dup_variable) Use hash tables.
3780
3781         * vars-prs.c: (fill_all_vars) Use hash tables.
3782         (is_dict_varname) Ditto.
3783         (parse_dict_variable) Ditto.
3784         
3785 Fri Dec 19 11:46:23 2003  Ben Pfaff  <blp@gnu.org>
3786
3787         Change value labels to use hash tables instead of AVL trees, and
3788         change value labels into an ADT.
3789
3790         * Makefile.am: (pspp_SOURCES) Add value-labels.c, value-labels.h.
3791         
3792         * value-labels.c: New file.
3793
3794         * value-labels.h: New file.
3795
3796         * apply-dict.c: (cmd_apply_dictionary) Use value label ADT.
3797         Get rid of a stupid use of goto.
3798
3799         * autorecode.c: (compare_alpha_value) Rewrite.
3800         (hash_alpha_value) Ditto.
3801         (compare_numeric_value) Rewrite.
3802         (hash_numeric_value) Ditto.
3803
3804         * frequencies.q: (dump_full) Use value label ADT.
3805
3806         * pfm-read.c: (read_value_label) Use value label ADT.
3807
3808         * pfm-write.c: (write_value_labels) Use value label ADT.
3809
3810         * sfm-read.c: (read_variables) Use value label ADT.
3811         (read_value_labels) Rewrite.
3812
3813         * sfm-write.c: (write_value_labels) Rewrite.
3814
3815         * sysfile-info.c: (cmd_sysfile_info) Use value label ADT.
3816         (display_variables) Ditto.
3817         (describe_variable) Ditto.
3818
3819         * t-test.q: (print_t_groups) Use value label ADT.
3820
3821         * temporary.c: (copy_variable) Use value label ADT.
3822         (free_dictionary) Ditto.
3823
3824         * val-labs.c: (verify_val_labs) Use value label ADT.
3825         (get_label) Ditto.
3826         (debug_print) Ditto.
3827         (val_lab_cmp) Removed.
3828         (inc_ref_count) Removed.
3829         (copy_value_labels) Removed.
3830
3831         * var.h: (struct value_label) Removed.
3832         (struct variable) Change AVL tree `val_lab' into hash table
3833         `val_labs'.
3834
3835         * vars-atr.c: (init_variable) Use value label ADT.
3836         (clear_variable) Ditto.
3837         (free_value_label) Removed.
3838         (free_val_lab) Removed.
3839         (get_val_lab) Removed.
3840         (compare_variables) New function.
3841         (hash_variable) New function.
3842
3843         * vfm.c: (dump_splits) Use value label ADT.
3844
3845 Fri Dec 19 11:18:11 2003  Ben Pfaff  <blp@gnu.org>
3846
3847         Add to the hash table interface.
3848
3849         * hash.c: (hsh_hash_bytes) Add assertion.
3850         (hsh_hash_string) Ditto.
3851         (hsh_clear) Ditto.
3852         (hsh_rehash) Ditto.
3853         (hsh_probe) Ditto.
3854         (hsh_create) Ditto.  Also make minimum `size'.
3855         (hsh_destroy) Rephrase.
3856         (sort_nulls_last) Removed.
3857         (not_null) New function.
3858         (hsh_data) Ditto.
3859         (comparison_helper) Ditto.
3860         (hsh_sort) Rewritten.
3861         (hsh_data_copy) New function.
3862         (hsh_sort_copy) Ditto.
3863         (hsh_insert) Ditto.
3864         (hsh_replace) Ditto.
3865         (hsh_hash_double) Ditto.
3866         (hsh_delete) Fix stupid bug.
3867         
3868 Thu Dec 18 12:27:03 WAST 2003 John Darrington <john@darrington.wattle.id.au>
3869         * added a calculation of the mode to FREQUENCIES
3870
3871 Wed Dec 17 12:53:01 WAST 2003 John Darrington <john@darrington.wattle.id.au>
3872
3873         * moved (un)defs of DEBUGGING to config.h
3874
3875 Mon Dec 15 21:35:59 2003  Ben Pfaff  <blp@gnu.org>
3876
3877         * groff-font.c: (add_kern) Fix indentation.
3878         (add_kern) Use & instead of % to take power-of-2 modulus.
3879         (font_get_kern_adjust) Likewise.
3880
3881 Fri Dec 12 23:54:37 2003  Ben Pfaff  <blp@gnu.org>
3882
3883         * autorecode.c: (recode) Replace stupid use of memcpy() by
3884         memberwise copy.
3885         (hash_alpha_value) Use hsh_hash_bytes().  Get rid of nasty casts.
3886         (hash_numeric_value) Ditto.
3887         (autorecode_proc_func) pool_strdup() was wrong here because the
3888         source string was not null-terminated.  Use new pool_strndup()
3889         instead.
3890
3891         * crosstabs.q: (enum_var_values) Remove superfluous and bizarre
3892         use of hsh_iterator_init().
3893
3894         * data-in.c: (parse_N) Initialize i->v->f.
3895
3896         * flip.c: (cmd_flip) Use memmove(), not memcpy(), to copy
3897         overlapping arrays.
3898
3899         * groff-font.c: Use power-of-2 hash table sizes, not prime.
3900         (groff_read_font) Don't call hsh_next_prime().  Don't call
3901         fclose(NULL).
3902         (static var hash) Remove `size_p', `max_used' members.
3903         (font_char_name_to_index) Don't call hsh_next_prime().  Use
3904         hsh_hash_string() instead of hashpjw(), & instead of %.
3905         (default_font) Don't call hsh_next_prime().
3906
3907         * pool.c: (pool_strndup) New function.
3908         (pool_strdup) Reimplement in terms of pool_strndup.
3909
3910         * postscript.c: (hash_font_entry) Use hsh_hash_string().  Get rid
3911         of nasty casts.
3912         (hash_ps_encoding) Use hsh_hash_string().
3913         (hash_ps_combo) Use hsh_hash_string(), hsh_hash_int().
3914         (hash_filename2font) Use hsh_hash_string().
3915
3916         * som.c: Add #include <stdlib.h>.
3917
3918         * tab.c: (tab_destroy) Don't set t->container after freeing `t'
3919         (by destroying its pool).
3920         
3921 Fri Dec 12 23:18:59 2003  Ben Pfaff  <blp@gnu.org>
3922
3923         Miscellaneous hash table code cleanup:
3924         
3925         * hash.h: (struct hsh_table) Moved into hash.c.
3926         (hsh_count) Ditto, and transformed into function.
3927         (hsh_compare_func) New typedef, used for defining otherwise-long
3928         function types here and in hash.c
3929         (hsh_hash_func) Ditto.
3930         (hsh_free_func) Ditto.
3931         
3932         * hash.c: (struct hsh_table) Renamed `n' to `used', `m' to `size',
3933         `table' to `entries'.  Removed `mp'.  All references updated.
3934         (hsh_clear) Don't shrink entries array; if the hash was this big
3935         once, it probably will be again.
3936         (hsh_rehash) Made static.
3937         (force_hsh_insert) Renamed hsh_force_insert.
3938         (force_hsh_find) Renamed hsh_force_find.
3939
3940         Made hash table sizes powers of 2, because that's fine with any
3941         reasonable hash function and because taking a power-of-2 modulus
3942         is faster than any other:
3943         
3944         (hsh_prime_tab) Removed;
3945         (hsh_next_prime) Ditto.
3946         (next_power_of_2) New function.
3947         (hsh_create) Use next_power_of_2.
3948         (hsh_rehash) Use & instead of %.
3949
3950         Cleaned up hsh_sort:
3951         
3952         (internal_comparison_fn) Removed.
3953         (sort_nulls_last) New function.
3954         (hsh_sort) Removed second parameter, switched to using the new
3955         quicksort() function from quicksort.h to avoid using nasty need
3956         for static variables with qsort().  All references updated.
3957
3958         Changed the hash functions offered, because there are better hash
3959         functions than the ones we had, and cleaned up the names to boot:
3960         
3961         * hash.c: (hashpjw_d) Removed.
3962         (hashpjw) Ditto.
3963         (hsh_hash_bytes) New function.
3964         (hsh_hash_string) New function.
3965         (hsh_hash_int) New function.
3966
3967         Improved the hash table iteration interface:
3968         
3969         * hash.h: (hsh_iterator_init) Removed.
3970         (struct hsh_iterator) Removed `init' member, change `next' to
3971         size_t.
3972
3973         * hash.c: (hsh_foreach) Removed.  All references updated to use
3974         hsh_first/hsh_next instead.
3975         (hsh_first) New function.  Notably, unlike hsh_foreach() it does
3976         not treat a null pointer as an empty hash table.
3977         (hsh_next) New function.
3978
3979         Made deletion possible, though slow:
3980
3981         * hash.c: (locate_matching_entry) New function.
3982         (hsh_find) Use locate_matching_entry().
3983         (hsh_delete) New function also using locate_matching_entry().
3984         (hsh_force_delete) New function.
3985
3986 Fri Dec 12 23:16:10 2003  Ben Pfaff  <blp@gnu.org>
3987
3988         * quicksort.c: New file implementing a sort routine with a
3989         interface better than qsort() because it passes a user-provided
3990         parameter to the sort routine.
3991
3992         * Makefile.am: Add quicksort.c, quicksort.h.
3993
3994 Fri Dec 12 13:31:58 2003  Ben Pfaff  <blp@gnu.org>
3995
3996         * All source files: Get rid of nasty special cases for Checker,
3997         which is pretty obsolete now.
3998
3999 Thu Dec 11 21:38:24 WST 2003 John Darrington <john@darrington.wattle.id.au>
4000
4001         * Fixed a bug apparent when using the FREQUENCIES command with the
4002         html driver.  The html driver was incorrectly trying to display 
4003         empty cells.
4004
4005 Sun Jan  2 21:40:13 2000  Ben Pfaff  <blp@gnu.org>
4006
4007         * Makefile.am: Reorganized.  Put locale dir in version.c instead
4008         of passing it to each compile command.  Only put local gmp libs in
4009         LD_ADD if not installed on system.  Remove `boast' target.
4010
4011         * All source files: struct and union typedefs eliminated.
4012         `sizeof type' replaced by `sizeof object' where practical.  Moved
4013         `unused' qualifiers from start to end of declarations for gcc
4014         2.7.2 compatibility.  Change `while (1)' to `for (;;)'.  Made
4015         assertions on pointers strictly compliant.  Removed _ prefixes on
4016         some function parameter names.
4017
4018         * alloc.c: New source file, containing these external linkage
4019         functions removed from common.c: xmalloc, xcalloc, xrealloc,
4020         xstrdup.
4021
4022         * arena.c: Removed.
4023         
4024         * arena.h: Removed.
4025
4026         * ascii.c: Migrated from arenas to pools.
4027         (struct ascii_driver_ext) ops[], box[], fonts[] changed from
4028         c_string to len_string.  All references changed.
4029         (ascii_option) Signature changed to comply to new output.c
4030         interface.
4031         (count_fancy_chars) Removed.
4032         (delineate) Removed support for rich text.
4033         (ascii_text_metrics) Ditto.
4034         (text_draw) Ditto.
4035         (output_shorts) Change `box', `off', `on' from c_string to
4036         len_string.  Change `remaining' from int to size_t.
4037         (ascii_close_page) Make page numbering less haphazard.
4038
4039         * autorecode.c: Migrate from arenas to pools.
4040
4041         * avl.c: Migrate from arenas to pools.  Synch from libavl 1.4.0.
4042
4043         * bitvector.h: New file containing these macros from misc.h:
4044         SET_BIT, CLEAR_BIT, SET_BIT_TO, TEST_BIT, BIT_INDEX.
4045
4046         * command.c: (struct command) cmd1, cmd2, cmd3 members changed to
4047         word[3].  ncmd removed.
4048         (var empty_string) Removed.
4049         (var cmd_table) Declaration updated.
4050         (var cmdtab) Removed.
4051         (cmp_command) Removed.
4052         (split_words) Rewritten to use strtok_r().
4053         (init_cmd_parser) Renamed cmd_init().  Rewritten.
4054         (find_command) Removed.
4055         (FILE_TYPE_okay) Rewritten.
4056         (cmd_parse) Rewritten.  Semantics of the return value of command
4057         handlers has changed: they must now return one of the new CMD_*
4058         enumerals, rather than a magic value.  This meant that all
4059         commands had to be modified, and they were.
4060         (figure_out_command) New function.
4061
4062         * command.def: Add CORRELATIONS, PEARSON CORRELATIONS.  Add
4063         #defines for INIT, INPU, etc.
4064
4065         * command.h: New CMD_* enum series.
4066         (cur_proc) Make const char *, not char *.
4067         (cmd_init) Prototype.
4068         (cmd_parse) Ditto.
4069
4070         * common.c: Removed.
4071
4072         * common.h: Removed.
4073
4074         * correlations.q: New file.
4075
4076         * crosstabs.q: Migrate from arenas to pools.  Migrate to new-style
4077         q2c.
4078         (custom_tables) Renamed crs_custom_tables().
4079         (custom_variables) Renamed crs_custom_variables().
4080         (calc_integer) Add in some `const' qualifiers.
4081         (table_value_missing) Change from a_string to len_string.
4082         (float_M_suffix) Change from a_string to len_string.
4083
4084         * data-in.c: Rewritten.  All references to
4085         parse_string_as_format() changed to data_in().
4086
4087         * data-in.h: New file.
4088
4089         * data-list.c: Change DLS_* from #define's to enums.  Move from
4090         rpd_msg() to tmsg().
4091         (RPD_ERR) New #define.
4092         (do_reading) Change dfm_push_cust() to dfm_push(), pop_cust() to
4093         dfm_pop().
4094         (read_from_data_list_fixed) Change from old
4095         parse_string_as_format() to new data_in().
4096         (read_from_data_list_free) Ditto.
4097         (read_from_data_list_list) Ditto.
4098         (cmd_repeating_data) Modify approach to checking for end of
4099         command.
4100         (rpd_msg) Removed.
4101         (rpd_parse_record) Change from old parse_string_as_format() to new
4102         data_in().  Change from old convert_format_to_string() to new
4103         data_out().
4104         (read_one_set_of_repetitions) Change dfm_push_cust() to
4105         dfm_push(), pop_cust() to dfm_pop().
4106
4107         * data-out.c: Rewritten.  All references to
4108         convert_format_to_string() changed to data_out().
4109
4110         * descript.q: Migrate to new q2c.
4111         (cmd_descriptives) Removed.
4112         (internal_cmd_descriptives) Renamed cmd_descriptives ().
4113         (custom_variables) Renamed dsc_custom_variables().
4114
4115         * dfm.c: (struct dfm_fhuser_ext) `ln' removed.  All references
4116         removed.
4117         (open_file_r) Initialize h->where.line_number.  Migrate to new
4118         struct string.
4119         (open_file_w) Initialize h->where.line_number.
4120         (read_record) Change from ext->ln to h->where.line_number.
4121         Migrate to struct string.
4122         (dfm_put_record) Rephrased.
4123         (dfm_push_cust) Renamed dfm_push(), rewritten.
4124         (dfm_pop) New function.
4125
4126         * error.c: All references updated.
4127         (glob var error_count) Renamed err_err_count.
4128         (glob var warning_count) Renamed err_warning_count.
4129         (glob var error_already_flagged) Renamed err_already_flagged.
4130         (glob var verbosity) Renamed err_verbosity.
4131         (glob var cust_fn) Removed.
4132         (glob var cust_ln) Removed.
4133         (static var file_loc) New.
4134         (static var nfile_loc) New.
4135         (static var mfile_loc) New.
4136         (tmsg) New function.
4137         (push_cust) Removed.
4138         (pop_cust) Removed.
4139         (msg) Rewritten.
4140         (static var terminating) Removed.
4141         (failure) Renamed err_failure().
4142         (hcf) Renamed err_hcf().
4143         (err_push_file_locator) New function.
4144         (err_pop_file_locator) New function.
4145         (err_location) New function.
4146         (check_error_count) Renamed err_check_count().
4147         (vmsg) Renamed err_vmsg().  Interface changed.
4148         (verbose_msg) Removed.
4149         (err_cond_fail) New function.
4150         (error_break) Renamed err_break().
4151
4152         * error.h: All references updated.
4153         (enum MSG_CLASS_COUNT) Renamed ERR_CLASS_COUNT.
4154         (enum ERR_CLASS_MASK, ERR_VERBOSITY_SHIFT, ERR_VERBOSITY_MASK)
4155         New.
4156         (struct file_locator) New.
4157         (struct error) New.
4158         (macro verbose_msg) Removed.
4159         (macro cond_fail) Removed.
4160
4161         * expr-opt.c: (evaluate_tree) sizeof(char) == 1.
4162
4163         * expr-prs.c: Reorganized.  All references updated.
4164         (exprtypename) Renamed expr_type_name().
4165         (typename) Renamed type_name().
4166         (free_expression) Renamed expr_free().
4167         (parse_expression) Renamed expr_parse().  Uses new type_check()
4168         function.
4169         (init_functab) Renamed init_func_tab().
4170         (type_check) New function.
4171         (parse_or) Rewritten to use new allocate_nonterminal() and
4172         append_nonterminal_arg() functions.
4173         (parse_and) Ditto.
4174         (parse_not) Ditto.
4175         (parse_rel) Ditto.  Also simplified logic.
4176         (parse_add) Ditto.
4177         (parse_mul) Ditto.
4178         (parse_neg) Ditto.
4179         (parse_exp) Ditto.
4180         (SYSMIS_func) Ditto.
4181         (VALUE_func) Rephrased.
4182         (CONCAT_func) Fix memory leak by replacing free by free_node on
4183         lossage.
4184         (generic_str_func) Ditto.
4185         (parse_function) Ditto.  Also rephrasings.  Uses bsearch() to find
4186         function.
4187         (allocate_nonterminal) New function.
4188         (append_nonterminal_arg) New function.
4189         (static func_tab[]) Now at file level.
4190         (cmp_func) Moved.
4191         (init_func_tab) Moved.  Now just uses qsort() to sort func_tab[].
4192
4193         * expr.h: (enum series OP_*) Moved to exprP.h.
4194         (OP_* defines) Ditto.
4195         (struct op_desc) Ditto.
4196         (global ops[]) Ditto.
4197         (struct num_con_node) Ditto.
4198         (struct str_con_node) Ditto.
4199         (struct var_node) Ditto.
4200         (struct lag_node) Ditto.
4201         (struct casenum_node) Ditto.
4202         (struct nonterm_node) Ditto.
4203         (union any_node) Members renamed.
4204         (struct sys_node) Removed.
4205         (struct val_node) Removed.
4206         (operator typedef) Removed.
4207         (typedef exprtype) Removed.
4208         (enum series EX_*) Moved to exprP.h.
4209         (struct expression) Ditto.  Also renamed a lot of the members.
4210         (PXP_* defines) Changed to enums.
4211         (free_node prototype) Moved to exprP.h.
4212
4213         * file-handle.h: (struct file_handle) New member `where'.
4214
4215         * file-handle.q: Migrated to new q2c format.
4216         (prepend_current_directory) Removed (dead code).
4217         (cmd_file_handle) Incorporated all of internal_cmd_file_handle().
4218         (fh_get_handle_by_filename) Removed dead code.
4219         Set new `where' member.
4220
4221         * file-type.c: (file_type_source_read) References to
4222         parse_string_as_format() changed to data_in().
4223         dfm_push_cust()/pop_cust() changed to dfm_push()/dfm_pop().
4224
4225         * filename.c: All references updated.
4226         (init_filename) Renamed fn_init().
4227         (expand_line) Removed.
4228         (macro EXPAND_LINE) Removed.
4229         (interp_vars) Renamed fn_interp_vars().  Now uses st_*() instead
4230         of custom functions.
4231         (gnu_getcwd) Renamed fn_get_cwd(), rewritten.
4232         (tilde_expand) Renamed fn_tilde_expand(), uses ds_*().
4233         (normalize_filename) Renamed fn_normalize().
4234         (search_path) Renamed fn_search_path(), rewritten.
4235         (prepend_dir) Renamed fn_prepend_dir().
4236         (blp_getenv) Renamed fn_getenv().
4237         (blp_dirname) Renamed fn_dirname().
4238         (fn_basename) New function, not used.
4239         (absolute_filename_p) Renamed fn_absolute_p().
4240         (is_special_filename) Renamed fn_special_p().
4241         (file_exists) Renamed fn_exists_p().
4242         (readlink_malloc) Renamed fn_readlink().
4243         (getenv_default) Renamed fn_getenv_default().
4244         (open_file) Renamed fn_open().
4245         (close_file) Renamed fn_close().
4246         (open_file_ext) Renamed fn_open_ext().
4247         (close_file_ext) Renamed fn_close_ext().
4248
4249         * font.h: Migrate from arenas to pools.
4250
4251         * format.c: (parse_format_specifier_name) Deal with ds_* strings.
4252
4253         * frequencies.g: Migrate from arenas to pools.
4254
4255         * frequencies.q: Migrate to new q2c version.  Migrate from arenas
4256         to pools.
4257
4258         * getline.c: All references updated.
4259         (global getl_buf) Changed from char * to struct string.
4260         (static getl_include_path) Ditto.
4261         (global getl_buf_len) Removed.
4262         (global getl_buf_size) Removed.
4263         (getl_include_path) Deal with new getl_buf, getl_include_path.
4264         (getl_uninitialize) New function.
4265         (getl_get_current_directory) Rewritten.
4266         (getl_clear_include_path) Rewritten.
4267         (getl_add_include_dir) Rewritten.
4268         (getl_add_file) Assertion fixed.
4269         (getl_add_virtual_file) Change initial value of `remaining_loops'
4270         from 2 to 1.
4271         (welcome) Rewritten.
4272         (handle_line_buffer) Make static.  Change logic to make
4273         getl_add_virtual_file() change sensible.  Use ds_*() strings.
4274         (getl_read_line) Use ds_*() strings.  Implement SET ECHO.
4275         (getl_close_file) Moved.
4276         (getl_location) New function.
4277
4278         * getline.h: All references updated.
4279         (macro curln) Removed.
4280         (macro curfn) Removed.
4281         (macro am_interactive) Renamed getl_am_interactive.
4282         (macro am_reading_script) Renamed getl_reading_script.
4283
4284         * glob.c: (global fmt_parse_ignore_error) Removed.
4285         (init_glob) Use locale_dir not LOCALEDIR.  Use feholdexcept() on
4286         systems that support it (C99).  Turn off SET ECHO by default.  No
4287         necessary julcal initialization anymore.
4288
4289         * groff-font.c: Migrate from arenas to pools.
4290         (groff_read_font) Use err_push_file_locator().
4291         (groff_read_DESC) Ditto.
4292         (font_msg) Use tmsg().
4293
4294         * hash.c: (hsh_sort) Fix debug code.
4295         [GLOBAL_DEBUGGING] Include stdio.h.
4296
4297         * hash.h: (macro force_hsh_insert) Rephrase.
4298
4299         * heap.c: Rewritten.
4300         
4301         * heap.h: Rewritten.
4302
4303         * html.c: (html_option) Change from outp_value to struct string.
4304         (postopen) Change from curfn to getl_location().
4305         (escape_string) Remove rich-text code.  Signature changed.
4306         (output_tab_table) Switch from a_string to struct len_string.
4307         Remove rich text support.
4308
4309         * lexer.c: All references updated.  Largely rewritten.  Major
4310         changes listed below.  Removed tagged quote support.  Adapted to
4311         struct string tokstr.
4312         (global tokstr) Changed to struct string.
4313         (global tokstr_size) Removed.
4314         (global tokstr_len) Removed.
4315         (global tokid) New.
4316         (global tokint) Removed.
4317         (global toklongstr) Removed.
4318         (C* defines) Removed.
4319         (static tbl[]) Removed.
4320         (static id[]) Removed.
4321         (static une[]) Removed.
4322         (discard_line) Renamed lex_discard_line().
4323         (get_entire_line) Renamed lex_entire_line().
4324         (get_rest_of_line) Renamed lex_rest_of_line().
4325         (get_dotted_rest_of_line) Merged into lex_rest_of_line().
4326         (make_hexit) Removed.
4327         (syntax_error) Renamed lex_error().  Return value removed.
4328         (get_token_representation) Renamed lex_token_representation().
4329         (putback) Renamed lex_put_back().
4330         (putfwd) Renamed lex_put_forward().
4331         (convert_negative_to_dash) Renamed lex_negative_to_dash().
4332         (set_prog) Renamed lex_set_prog().
4333         (init_lex) Renamed lex_init().
4334         (reset_eof) Renamed lex_reset_eof().
4335         (lookahead) Renamed lex_look_ahead().
4336         (check_id) Rewritten.
4337         (yylex) Renamed lex_get(), rewritten.
4338         (lex_end_of_command) New function.  Many commands were rephrased
4339         using this.
4340         (lex_integer_p) New function.  Replaces compare of tokint against
4341         NOT_LONG.
4342         (lex_integer) New function.  Replaces tokint.
4343         (match_tok) Renamed lex_match().
4344         (match_id) Renamed lex_match_id().
4345         (match_int) Renamed lex_match_int().
4346         (force_match_id) Renamed lex_force_match_id(), added return value.
4347         (force_match) Renamed lex_force_match(), added return value.
4348         (force_string) Renamed lex_force_string(), added return value.
4349         (force_int) Renamed lex_force_int(), added return value.
4350         (lex_id_match_len) New function.
4351         (id_match) Renamed lex_id_match(), rewritten.
4352         (get_line) Renamed lex_get_line().
4353         (preprocess_line) Renamed lex_preprocess_line().
4354         (tokname) Renamed lex_token_name().
4355         (bin_value_func) Removed.
4356         (oct_value_func) Removed.
4357         (hex_value_func) Removed.
4358         (unexpected_eof) New function.
4359         (convert_numeric_string_to_char_string) New function.
4360         (parse_string) Rewritten, signature changed.
4361         (add_tokstr_char) Removed.
4362         (add_tokstr_unsigned) Removed.
4363         (add_tokstr_string) Removed.
4364         (parse_tagged_quote) Removed.
4365         (skip_comment) Renamed lex_skip_comment().
4366
4367         * lexer.h: All references updated.
4368         (macro is_id1) Renamed CHAR_IS_ID1.
4369         (macro is_idn) Renamed CHAR_IS_IDN.
4370         (token names ID, NUM, STRING, STOP, ... WITH, EXP) Renamed with
4371         prefix T_: T_ID, T_NUM, T_STRING, T_STOP, ... T_WITH, T_EXP.
4372         (macro get_token) Removed.
4373         (macro id_match) Removed.
4374         (macro force_match_id) Removed.
4375         (macro force_match) Removed.
4376         (macro force_string) Removed.
4377         (macro force_int) Removed.
4378         (macro force_num) Removed.
4379         (macro force_id) Removed.
4380
4381         * lexerP.h: Removed.
4382
4383         * list.q: Migrated to new q2c format.
4384         (write_line) Deal with struct len_string.
4385         (write_varname) Ditto.
4386         (write_fallback_headers) Ditto.
4387
4388         * magic.c: New file, incorporating the following global variables
4389         previously in other files: endian, second_lowest_value.  And both
4390         of those are conditional on #define's.
4391
4392         * magic.h: New file, incorporating the following global variable
4393         declarations: endian, second_lowest_value, and the following macro
4394         declarations: NOT_DOUBLE, NOT_LONG, NOT_INT.
4395
4396         * main.c: Added declarations of pgmname, finished, curdate,
4397         start_interactive.
4398         (main) Call new parse_script() function.
4399         (parse_script) New function.
4400         (execute_command) New function.
4401         (dump_token) Removed.
4402         (handle_error) New function.
4403
4404         * matrix.c: New file.
4405
4406         * matrix.h: New file.
4407
4408         * matrix-data.c: Migrated from arenas to pools.
4409         (mget_token) Change from parse_string_as_format() to data_in().
4410
4411         * means.q: Migrate to new q2c.
4412         (custom_tables) Renamed mns_custom_tables().
4413         (custom_crossbreak) Renamed mns_custom_crossbreak().
4414         (custom_variables) Renamed mns_custom_variables().
4415
4416         * mis-val.c: (static var width) Changed from `int' to `size_t'.
4417         (parse_varnames) Prototype.
4418         (parse_numeric) Rephrasings.
4419         (parse_alpha) Adapt to new struct string tokstr.
4420
4421         * misc.c: (intlog10) Rewritten.
4422         (spacing) Removed.
4423         (ansi_rand) Renamed real_rand(), moved into random.c.
4424         (ansi_srand) Renamed real_srand(), moved into random.c.
4425         (setup_randomize) Moved to random.c.
4426         (rand_uniform) Ditto.
4427         (rand_normal) Ditto.
4428         (rand_simple) Ditto.
4429         (get_config_line) Removed.
4430         (reverse) Removed (dead code).
4431
4432         * misc.h: (macro SET_BIT) Moved to bitvector.h.
4433         (macro CLEAR_BIT) Ditto.
4434         (macro TEST_BIT) Ditto.
4435         (macro SET_BIT_TO) Ditto.
4436         (macro BIT_INDEX) Ditto.
4437
4438         * output.c: (outp_read_devices) Move to err_push_file_locator()
4439         from push_cust().  Use struct string.
4440         (expand_op_tokstr) Removed.
4441         (static var op_tokstr) Changed to struct string.
4442         (static var op_tokstr_size) Removed.
4443         (tokener) Rephrasings.  Use struct string.
4444         (parse_options) Use struct string.
4445         (destroy_driver) Fix assertion.
4446         (outp_get_paper_size) Move to err_push_file_locator().
4447         [0] Removed dead code.
4448         (outp_string_width) Move to len_string.
4449
4450         * output.h: Comment fixes.
4451         (TAG_* enum series) Removed.
4452         (struct outp_value) Removed.
4453         (enum OUTP_T_FANCY) Removed.
4454         (struct outp_text) `s' changed from a_string to len_string.
4455         (struct outp_class) `option' change arg 3 from outp_value to
4456         struct string.
4457
4458         * pfm-read.c: (corrupt_msg) Rewritten.
4459
4460         * pfm-write.c: (bufwrite) Fix assertion.
4461
4462         * pool.c: New file, reference version.
4463
4464         * pool.h: New file, reference version.
4465
4466         * postscript.c: (ps_font_sizes) Fix assertion.
4467         (ps_option) Change arg 3 from outp_value to struct string.
4468         Adapt to struct string.
4469         (macro output_line) Removed.
4470         (macro add_string) Removed.
4471         (output_encodings) Adapted to struct string.  Moved to
4472         err_push_file_locator().
4473         (find_encoding_file) Fix assertion.
4474         (read_ps_encodings) Move to err_push_file_locator().
4475         (postopen) Use getl_location() instead of curfn.
4476         (out_text_plain) Move to len_string.
4477         (text) Ditto.  Remove rich text support.
4478
4479         * print.c: (cmd_print) Remove now-unneeded resource cleanup code.
4480         (cmd_print_eject) Ditto.
4481         (cmd_write) Ditto.
4482         (internal_cmd_print) Now cleans up after itself.  Uses
4483         fh_parse_file_handle() now.
4484         (cmd_print_space) Use PXP_NUMERIC to type-check.
4485
4486         * q2c.c: Overhauled.  Removed _("") i18n support.  All references
4487         updated.  All output functions updated to handle structures rather
4488         than local or static variables.  Adapt to new PSPP lex_*()
4489         functions.
4490         (macro _) Removed.
4491         (macro N_) Removed.
4492         (macro MAX_N_SBC) Removed.
4493         (global bare) Removed.
4494         (enum STRING) Renamed T_STRING.
4495         (enum ID) Renamed T_ID.
4496         (get_buffer) Buffer size increased.
4497         (strlower) Renamed st_lower(), rephrased.
4498         (strupper) Renamed st_upper(), rephrased.
4499         (skip_ws) New function.
4500         (get_line) Don't special-case any types of lines (like those
4501         beginning with ! or $, for instance).
4502         (get_token) Renamed lex_get().  Rephrased.
4503         (static var `prefix') New.
4504         (parse) New function.
4505         (parse_setting) Minor rephrasing.
4506         (dump_specifier_vars) Ditto.
4507         (make_identifier) Put null terminator on identifier, duh.
4508         (dump_vars) Renamed dump_declarations().  Never indent.  Never
4509         static.  Output changed entirely.
4510         (dump_specifier_init) Rephrase.
4511         (dump_vars_init) No index variable needed.  Other modifications.
4512         (dump_parser) Don't parse command name.  Do dump functions instead
4513         of just code fragments.
4514         (dump_free) Dump function instead of code fragment.
4515         (recognize_directive) New function.
4516         (main) Use recognize_directive().  Don't rely on magic $ line
4517         beginning: instead, parse comments.  Update list of headers.
4518
4519         * random.c: New file, containing the following functions:
4520         real_rand(), real_srand(), setup_randomize, shuffle, rand_uniform,
4521         rand_normal, rand_simple.
4522
4523         * random.h: New file.
4524
4525         * recode.c: (cmd_recode) Merge internal_cmd_recode() into this
4526         function.  `max_src_width', `max_dst_width' changed to size_t.
4527         (internal_cmd_recode) Removed.
4528         (parse_dest_spec) Merge similar cases.
4529         (parse_src_spec) Add assertion.
4530
4531         * repeat.c: (recognize_keyword) New function.
4532         (internal_cmd_do_repeat) Parse and handle PRINT keyword on END
4533         REPEAT.  Improve recognition of END REPEAT (use
4534         recognize_keyword()).  Move from curfn to getl_location().  Use
4535         struct string.
4536                 
4537         (perform_DO_REPEAT_substitutions) Adapt to struct string.
4538
4539         * set.q: Adapt to new q2c.
4540         (cmd_set) Range-check some values better.
4541         (custom_blanks) Renamed stc_custom_blanks().
4542         (custom_length) Renamed stc_custom_length().
4543         (custom_results) Renamed stc_custom_results().
4544         (custom_seed) Renamed stc_custom_seed().
4545         (custom_width) Renamed stc_custom_width().
4546         (custom_format) Renamed stc_custom_format().
4547         (custom_journal) Renamed stc_custom_journal().
4548         (custom_color) Renamed stc_custom_color().
4549         (custom_listing) Renamed stc_custom_listing().
4550         (custom_disk) Renamed stc_custom_disk().
4551         (custom_log) Renamed stc_custom_log().
4552         (custom_rcolor) Renamed stc_custom_rcolor().
4553         (custom_viewlength) Renamed stc_custom_viewlength().
4554         (custom_workdev) Renamed stc_custom_workdev().
4555
4556         * settings.h: Not necessary to include format.h any longer.
4557
4558         * sfm-read.h: (macro bswap_int32) Moved here from sfmP.h.
4559         (corrupt_msg) Rewritten.
4560
4561         * sort.c: Adapt to rewritten heap ADT.
4562
4563         * str.c: (aa_strcpy) Removed.
4564         (ab_strcpy) Removed.
4565         (ac_strcpy) Removed.
4566         (ba_strcpy) Removed.
4567         (bb_strcpy) Removed.
4568         (ca_strcpy) Removed.
4569         (aa_strdup) Removed.
4570         (aa_strdupcpy) Removed.
4571         (ba_strdup) Removed.
4572         (sa_strdup) Removed.
4573         (memrev) Renamed mm_reverse().
4574         (memrmem) Renamed mm_find_reverse().
4575         (cmp_str) Renamed st_compare_pad().
4576         (strmaxcpy) Removed.
4577         (strbarepadcpy) Renamed st_bare_pad_copy(), signature changed.
4578         (strbarepadlencpy) Renamed st_bare_pad_len_copy(), signature
4579         changed.
4580         (strpadcpy) Renamed st_pad_copy(), signature changed.
4581         (blpstrset) Removed.
4582         (ds_create) New function.
4583         (ds_init) New function.
4584         (ds_replace) New function.
4585         (ds_destroy) New function.
4586         (ds_clear) New function.
4587         (ds_extend) New function.
4588         (ds_shrink) New function.
4589         (ds_truncate) New function.
4590         (ds_length) New function.
4591         (ds_size) New function.
4592         (ds_value) New function.
4593         (ds_end) New function.
4594         (ds_concat) New function.
4595         (ds_concat_buffer) New function.
4596         (ds_printf) New function.
4597         (ds_putchar) New function.
4598         (ds_getline) New function.
4599         (ds_get_config_line) New function derived from the old
4600         misc.c:get_config_line().
4601         (ls_create) New function.
4602         (ls_create_buffer) New function.
4603         (ls_init) New function.
4604         (ls_shallow_copy) New function.
4605         (ls_destroy) New function.
4606         (ls_null) New function.
4607         (ls_null_p) New function.
4608         (ls_empty_p) New function.
4609         (ls_length) New function.
4610         (ls_value) New function.
4611         (ls_end) New function.
4612
4613         * str.h: Reformatted.
4614         (struct a_string) Removed.
4615         (struct b_string) Removed.
4616         (struct c_string) Removed.
4617         (struct len_string) New.
4618         (struct string) New.
4619         (macro as_streq) Removed.
4620         (macro bs_streq) Removed.
4621         (macro cs_streq) Removed.
4622         (macro sa_streq) Removed.
4623         (macro sb_streq) Removed.
4624         [__GNUC__] (inline function ds_putchar) New function.
4625         [__GNUC__] (inline function ds_length) New function.
4626         [__GNUC__] (inline function ds_value) New function.
4627         [__GNUC__] (inline function ds_end) New function.
4628
4629         * sysfile-info.c: (cmd_sysfile_info) Rephrased.
4630         (display_vectors) Fix missing i18n.
4631
4632         * t-test.q: Migrate to new q2c.
4633
4634         * tab.c: Migrate from arenas to pools.
4635         (tab_create) Use struct len_string.
4636         (tab_realloc) Ditto.
4637         (text_format) Ditto.
4638         (tab_joint_text) Ditto.
4639         (tab_natural_width) Remove rich text support.
4640         (tab_natural_height) Ditto.
4641         (tab_output_text) Handle TAT_FIX.
4642         (tab_raw) Change arg from a_string to len_string.
4643         (tabi_driver) Fix assertion.  Use struct len_string.
4644         (render_strip) Use struct len_string.  Remove rich text support.
4645         Add `const' qualifiers.
4646
4647         * tab.h: (enum TAB_RICH) Remove.
4648         (enums TAB_COL_NONE, TAB_COL_DONE) New.  Where appropriate,
4649         SOM_COL_* updated to read TAB_COL_*.
4650         (struct tab_table) Change arena to pool.  Change a_string to
4651         len_string.
4652
4653         * temporary.c: (restore_dictionary) Rewrite Checker code.
4654
4655         * var.h: (macros MAX_SHORT_STRING, MIN_LONG_STRING, SYSMIS,
4656         LOWEST, HIGHEST) Moved here from common.h.
4657         (typedef any_trns) Removed.  All references changed to `struct
4658         trns_header'.
4659
4660         * vars-atr.c: (force_create_variable) Fix assertion.
4661         (force_dup_variable) Fix assertion.
4662         
4663 Thu Jun  3 18:40:42 1999  Ben Pfaff  <blp@gnu.org>
4664
4665         Using alphanumeric variables in functions under AGGREGATE
4666         segfaulted.  Fixed.  Thanks to Dr. Dirk Melcher
4667         <BZN-mdksh@t-online.de> for reporting this bug.
4668         
4669         * aggregate.c: (parse_aggregate_functions) When setting the
4670         FSTRING bit, also allocate memory for the `string' member of
4671         agr_next.
4672         (free_aggregate_functions) Free iter->string.  Don't use the
4673         non-function bits when indexing the array of functions.
4674         [DEBUGGING] (debug_print) Don't use the non-function bits when
4675         indexing the array of functions.        
4676
4677 Sun May 30 00:00:54 1999  Ben Pfaff  <blp@gnu.org>
4678
4679         Under certain circumstances, the final case would be omitted from
4680         the results of an AGGREGATE operation.  Fixed.  Thanks to Dr. Dirk
4681         Melcher <BZN-mdksh@t-online.de> for reporting this bug.
4682         
4683         * aggregate.c (agr_00x_end_func): Increment number of cases in
4684         sink before writing case.  For streams that keep track of how many
4685         cases there are based on this value, this means that the last case
4686         will be read in on the next stream read.
4687
4688 Sat May 29 22:03:31 1999  Ben Pfaff  <blp@gnu.org>
4689
4690         Undefined behavior was invoked by referencing a freed pointer.
4691         
4692         * vfm.c (memory_stream_write): Free pointer *after* checking for
4693         non-null status.
4694
4695 Sat May 29 22:02:22 1999  Ben Pfaff  <blp@gnu.org>
4696
4697         A wrong record size was displayed when paging the active file to
4698         disk.
4699         
4700         * vfm.c: (memory_stream_write) Fix off-by-one error.
4701
4702 Sat May 29 21:50:26 1999  Ben Pfaff  <blp@gnu.org>
4703
4704         Not having enough temporary space for sorting caused a core dump.
4705         Fixed.
4706         
4707         * sort.c: (allocate_cases) Initialize i.
4708
4709 Sat May 29 21:40:54 1999  Ben Pfaff  <blp@gnu.org>
4710
4711         Syntax errors in function descriptions on AGGREGATE caused core
4712         dumps.  Fixed.
4713         
4714         * aggregate.c (cmd_aggregate): Don't free agr_dict after calling
4715         free_aggregate_functions(), since that function already frees
4716         agr_dict.
4717         
4718 Sat May 29 21:06:10 1999  Ben Pfaff  <blp@gnu.org>
4719
4720         A null pointer was dereferenced, causing a core dump, when
4721         PERCENTILES was specified on FREQUENCIES.  This fixes the problem,
4722         but PSPP still doesn't calculate percentiles.  Thanks to Regnor
4723         Jernsletten <rjernsle@eunet.no> for reporting this problem.
4724         
4725         * arena.c: (arena_malloc) If the arena hasn't been initialized
4726         already, initialize it.
4727
4728 Sat May 29 20:47:29 1999  Ben Pfaff  <blp@gnu.org>
4729
4730         * Makefile.cygwin: New file supplied by Hankin <hankin@dunno.com>
4731         for compilation with Cygnus Windows B20.  Not used by other
4732         systems.
4733
4734 Sat May 29 20:36:04 1999  Ben Pfaff  <blp@gnu.org>
4735
4736         SORT always sorted in ascending order.  Fixed.  Thanks to Dr. Dirk
4737         Melcher <BZN-mdksh@t-online.de> for reporting this bug.
4738
4739         * sort.c: (compare_case_lists) Reverse sense of comparison if
4740         sorting in descending order.
4741         (compare_record) Ditto.
4742
4743 Tue Mar  9 13:18:54 1999  Ben Pfaff  <blp@gnu.org>
4744
4745         SPLIT FILE with a string variable caused a core dump.  Fixed.
4746
4747         * vfm.c: If the variable is a string then make a temporary value
4748         struct pointing to it.  The underlying problem is a lot bigger
4749         than this (see TODO) but this is a stopgap for the simple case at
4750         least.
4751         
4752 Tue Mar  9 13:15:53 1999  Ben Pfaff  <blp@gnu.org>
4753
4754         Nested INCLUDEs didn't work.  Fixed.
4755
4756         * getline.c: (getl_include) Set first_line to NULL in allocated
4757         structure.
4758
4759 Tue Mar  9 13:13:46 1999  Ben Pfaff  <blp@gnu.org>
4760
4761         The MATCH FILES procedure set the values of variables not present
4762         to 0.  It should have been SYSMIS.  This is now fixed.
4763
4764         * get.c: (mtf_delete_file_in_place) Replace 0.0 by SYSMIS.
4765
4766 Tue Mar  9 12:52:23 1999  Ben Pfaff  <blp@gnu.org>
4767
4768         The REMARK command was too aggressive about skipping lines.  It
4769         didn't like being the last command in a file.
4770
4771         * command.c: (cmd_remark) Call get_entire_line() instead of
4772         get_line().
4773
4774 Tue Mar  9 12:48:05 1999  Ben Pfaff  <blp@gnu.org>
4775
4776         Comment parsing wasn't consistent with the rest of the code in its
4777         idea of where one command ends and another starts.  This meant
4778         that sometimes commands would be mysteriously ignored.  Thanks to
4779         Dr. Dirk Melcher <BZN-mdksh@t-online.de> for reporting this bug.
4780          
4781         * command.c: (parse_cmd) Hand off comment parsing to new function
4782         skip_comment() in lexer.c.
4783         * lexer.c: (skip_comment) New function.
4784
4785 Wed Jan 20 20:22:07 1999  Ben Pfaff  <blp@gnu.org>
4786
4787         The TABLE subcommand on MATCH FILES worked only erratically at
4788         best.  This fixes it.  Thanks to Dr. Dirk Melcher
4789         <BZN-mdksh@t-online.de> for reporting this bug.
4790
4791         * get.c: (mtf_compare_BY_values) When comparing string values, a
4792         difference of 1 is still a difference :-)
4793         (mtf_processing) Inverted TABLE reading logic fixed.  Also don't
4794         advance TABLE files automatically when matched.  Comment fixes.
4795
4796 Tue Jan 19 22:32:31 1999  Ben Pfaff  <blp@gnu.org>
4797
4798         VARIABLE LABELS rejected a slash before the first variable
4799         specification, contradicting the documentation.  Thanks to Walter
4800         M. Gray <graywm@northernc.on.ca> for reporting this bug.
4801
4802         * var-labs.c: (cmd_variable_labels) Ignore a leading slash in
4803         command specification.
4804
4805 Tue Jan 19 22:29:54 1999  Ben Pfaff  <blp@gnu.org>
4806
4807         Because of an incorrect optimization in memory allocation,
4808         CROSSTABS sometimes segfaulted when asked to output multiple
4809         tables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
4810         reporting this bug.
4811
4812         * crosstabs.q: (postcalc) New variables maxcols, maxcells, which
4813         are passed to output_pivot_table() for its use.
4814         (output_pivot_table) Instead of assuming the number of columns is
4815         constant, keep track with maxcols.  In general mode, use maxcells
4816         to determine whether more matrix cells need to be allocated.    
4817
4818 Tue Jan 19 22:27:46 1999  Ben Pfaff  <blp@gnu.org>
4819
4820         CROSSTABS didn't display value labels for column and row
4821         variables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
4822         reporting this bug.
4823
4824         * crosstabs.q: (table_value_missing) If the specified value has a
4825         value label for this variable, then show it instead of the raw
4826         value.
4827         (display_dimensions) Delegate display of value_labels to
4828         table_value_missing.
4829
4830 Mon Jan 18 20:04:06 1999  Ben Pfaff  <blp@gnu.org>
4831
4832         WRITE didn't write line ends.  Fixed.  Thanks to Dr. Dirk Melcher
4833         <BZN-mdksh@t-online.de> for reporting this bug.
4834
4835         * print.c: (print_trns_proc) Write (CR/)LF if PRINT is used _or_
4836         if the file isn't declared as binary.
4837
4838 Mon Jan 18 19:56:45 1999  Ben Pfaff  <blp@gnu.org>
4839
4840         MATCH FILES corrupted memory and dumped core on some syntax
4841         errors.  Fixed.
4842
4843         * get.c: (cmd_match_files) Set file->handle to NULL before
4844         jumping to lossage.
4845         (mtf_free_file) Don't free a null dictionary.   
4846
4847 Mon Jan 18 19:27:57 1999  Ben Pfaff  <blp@gnu.org>
4848
4849         MATCH FILES should set numeric values not available to the
4850         system-missing value, not to 0.  Thanks to Dr. Dirk Melcher
4851         <BZN-mdksh@t-online.de> for reporting this bug.
4852
4853         * get.c: (mtf_processing) Set unused records to system-missing,
4854         not 0.
4855
4856 Mon Jan 18 15:06:46 1999  Ben Pfaff  <blp@gnu.org>
4857
4858         KEEP didn't work properly on the SAVE procedure.  Fixed.  Thanks
4859         to Ralf Geschke <ralf@kuerbis.org> for reporting this bug.
4860
4861         * temporary.c: (save_dictionary) Initialize var_by_name AVL tree
4862         in newly created dictionary, and add each copied variable to the
4863         tree.
4864  
4865 Mon Jan 18 15:04:48 1999  Ben Pfaff  <blp@gnu.org>
4866
4867         Memory leak fix.
4868         
4869         * get.c: (trim_dictionary) Free variable list for KEEP after
4870         finishing with it.
4871
4872 Mon Jan 18 12:57:36 1999  Ben Pfaff  <blp@gnu.org>
4873
4874         Some systems didn't like the way open_file was coded.  Thanks to
4875         Hankin <hankin@rogue.consultco.com> for pointing this out.
4876
4877         * filename.c: (open_file) Don't try to store stdin, stdout,
4878         stderr as part of an array, because that doesn't always work.
4879
4880 Mon Jan 18 12:53:27 1999  Ben Pfaff  <blp@gnu.org>
4881
4882         The SAVE procedure didn't save long string variables properly.
4883         Fixed by this patch.  Thanks to Hankin
4884         <hankin@rogue.consultco.com> for this patch.
4885         
4886         * sfm-write.c: (write_variable) Fix off-by-one error in writing
4887         out variable pad records.
4888
4889 Tue Jan  5 14:29:27 1999  Ben Pfaff  <blp@gnu.org>
4890
4891         Previously, if PRINT SPACE were given a negative argument, it
4892         would report an error, then spin in an (almost) infinite loop.
4893         This fixes that behavior.
4894
4895         * print.c: (print_space_trns_proc) After reporting a negative
4896         argument, set number of lines to print to 1.
4897
4898 Tue Jan  5 13:59:55 1999  Ben Pfaff  <blp@gnu.org>
4899
4900         SPSS 8.0 outputs some new record types in its system files, and it
4901         allows longer value labels.  Accept these system files.
4902
4903         * sfm-read.c: (sfm_read_dictionary) Ignore record type 7 subtype
4904         11 emitted by SPSS 8.0.
4905         
4906 Tue Jan  5 13:55:50 1999  Ben Pfaff  <blp@gnu.org>
4907
4908         The LIST procedure was too conservative in allocating space for
4909         buffers, which caused a bug that only showed up with very long
4910         output variables.  Thanks to Hankin <hankin@dunno.com> for this
4911         bug report.
4912
4913         * list.q: (determine_layout) Allocate 1022 bytes instead of 256.
4914
4915 Tue Jan  5 13:34:34 1999  Ben Pfaff  <blp@gnu.org>
4916
4917         Typo meant string format specifiers weren't checked properly.  I
4918         think that Hankin <hankin@dunno.com> sent me this report, but I'm
4919         willing to be corrected on this point.
4920  
4921         * format.c: (check_string_specifier) Fix obvious typo.  
4922
4923 Tue Jan  5 12:50:42 1999  Ben Pfaff  <blp@gnu.org>
4924
4925         Using $CASENUM in an expression didn't work.  Here's a fix.
4926         Thanks to Dirk Melcher <BZN-mdksh@t-online.de> for reporting this
4927         bug.
4928          
4929         * expr-evl.c: (evaluate_expression) Add OP_CASENUM case.
4930
4931         * expr-opt.c: (dump_node) OP_CASENUM is acceptable.
4932
4933 Tue Jan  5 12:47:48 1999  Ben Pfaff  <blp@gnu.org>
4934
4935         The changes in 0.2.1 to fix DATA LIST FREE parsing broke some
4936         other behavior, *sigh*.  This patch hopefully fixes that.  This
4937         time I've actually tested it.
4938
4939         Thanks to Hankin <hankin@dunno.com> for reporting this bug.
4940
4941         * data-list.c: (read_from_data_list_free,
4942         read_from_data_list_list) Call parse_string_as_format() directly
4943         without mucking around with the field width.
4944
4945 Tue Jan  5 12:31:19 1999  Ben Pfaff  <blp@gnu.org>
4946
4947         Occasionally, you may encounter a script that wants to be
4948         interpreted in interactive mode.  Make -i emulate this behavior to
4949         allow such scripts to be executed with PSPP.
4950
4951         Thanks to Hankin <hankin@dunno.com> for reporting this behavior.
4952
4953         * cmdline.c: (pre_syntax_message[]) Update -i description.
4954
4955         * lexer.c: (preprocess_line) When getl_interactive is 2 (i.e.,
4956         when -i is given on the command line) don't treat unindented lines
4957         as starting a new command.
4958
4959 Tue Jan  5 12:30:10 1999  Ben Pfaff  <blp@gnu.org>
4960
4961         In conjunction with egcs 1.1.1, Checker emits some bogus warnings,
4962         mostly caused by local initialized aggregates.  After egcs is
4963         fixed upstream these can be removed, but for now they're not a big
4964         deal.
4965         
4966         * ascii.c: (ascii_postopen_driver) Checker chokes on local
4967         initialized arrays.  Avoid this.
4968
4969         * sfm-write.c: (sfm_write_dictionary) Don't use a local
4970         initialized struct.
4971
4972 Tue Jan  5 12:07:24 1999  Ben Pfaff  <blp@gnu.org>
4973
4974         egcs 1.1.1 has some new warnings relative to gcc 2.8.1, which the
4975         following changes avoid.  Currently I compile sources with egcs
4976         1.1.1 and gcc 2.7.2.3 before sending them out.
4977
4978         * apply-dict.c: (apply_dict) Use new avl_traverser_init() macro.
4979         
4980         * ascii.c: (option_tab[]) Initialize all struct members.
4981
4982         * avl.h: (avl_traverser_init) New macro.
4983         
4984         * command.c: (DEFCMD, UNIMPL macros, cmd_table[]) Initialize all
4985         struct members.
4986
4987         * crosstabs.q: (enum_var_values) Use new hsh_iterator_init()
4988         macro.
4989
4990         * hash.c: Comment fix.
4991
4992         * hash.h: (hsh_iterator_init) New macro.
4993
4994         * html.c: (option_tab[]) Initialize all struct members.
4995
4996         * pfm-write.c: (write_value_labels) Use new avl_traverser_init()
4997         macro.
4998
4999         * postscript.c: (option_tab[]) Initialize all struct members.
5000         (output_encodings, preclose, dump_lines) Use new
5001         hsh_iterator_init() macro.
5002
5003         * sfm-write.c: (write_value_labels) Use new avl_traverser_init()
5004         macro.
5005
5006         * sysfile-info.c: (describe_variable) Use new avl_traverser_init()
5007         macro.
5008
5009 Thu Nov 19 12:32:45 1998  Ben Pfaff  <blp@gnu.org>
5010
5011         * data-in.c: Examined each of the parsing functions to make sure
5012         that they wouldn't dump core if they were passed a string of the
5013         wrong length, since now the DATA LIST FREE/LIST routines don't
5014         check for field width before passing it to the data parser.
5015         (parse_RBHEX, parse_AHEX) Reject odd length input.
5016         (parse_string_as_format) Reject input that's too short or too
5017         long.
5018
5019         * data-list.c: Before, the DATA LIST FREE/LIST routines would pad
5020         a field to its entire declared output width then pass it to the
5021         data-in parsing routines.  This contradicted the documented
5022         behavior.  This is fixed in these changes.  Thanks to Mark H. Wood
5023         <mwood@IUPUI.Edu>.  In addition, this fixes a few more details of
5024         free-format parsing that differed from SPSS.
5025         (cut_field) Commas and spaces are treated identically.  Returns
5026         the proper column instead of a fixed 1 value.
5027         (parse_field) Removed.
5028         (read_from_data_list_free, read_from_data_list_list) Call
5029         parse_string_as_format directly instead of parse_field.
5030
5031         * heap.c: (heap_delete) Stylistic fixes.
5032
5033 Sun Aug  9 11:12:13 1998  Ben Pfaff  <blp@gnu.org>
5034
5035         * loop.c: (loop_2_trns_proc) Formatting fix.
5036
5037         * sel-if.c: (cmd_filter) Set FILTER_before_TEMPORARY.
5038
5039         * var.h: (glob var FILTER_before_TEMPORARY) New global var.
5040
5041         * vfm.c: (macro FILTERED) New.
5042         (static var filter_var) New.
5043         (process_active_file_write_case) Use FILTERED.
5044         (setup_filter) Set filter_var.
5045         (close_active_file) Delete the filter if not
5046         FILTER_before_TEMPORARY.
5047         (procedure_write_case) Use FILTERED.
5048
5049 Sat Aug  8 00:20:14 1998  Ben Pfaff  <blp@gnu.org>
5050
5051         * crosstabs.q: Changed /PIVOT={ON,OFF} to /FORMAT={PIVOT,NOPIVOT}.
5052
5053         * data-in.c: (parse_day_count) Message fix.
5054         (parse_month) Style fix.
5055
5056         * data-list.c: (struct data_list_pgm) New member eof.
5057         (cmd_data_list) Init eof to 0.
5058         (do_reading) Implement the /END subcommand and read-past-eof
5059         checking.
5060
5061         * do-if.c: Include stdio.h when debugging.
5062         (cmd_else_if) Make sure the command is .-terminated.
5063
5064         * glob.c: (init_glob) Capitalize the command prompt.
5065
5066         * inpt-pgm.c: (end_case_trns_proc) Debugging message.
5067         (end_file_trns_proc) Debugging message.
5068
5069         * loop.c: (internal_cmd_loop) Make it work when there's no loop
5070         index!
5071         (loop_2_trns_proc) Enable MXLOOPS (why was this disabled?)
5072
5073         * main.c: (dump_token) Make kwtab[] const.
5074
5075         * set.q: Spelling, comment fixes.
5076
5077         * sysfile-info.c: (cmd_display) DISPLAY VECTORS not DISPLAY
5078         VECTOR.
5079
5080         * vars-prs.c: (fill_all_vars) Style fix.
5081
5082         * vfm.c: (index_to_varname) Return const.
5083
5084 Tue Aug  4 23:49:23 1998  Ben Pfaff  <blp@gnu.org>
5085
5086         * Changes in many source files for partial -ansi -pedantic and
5087         no-debugging compliance: Remove trailing common in enum
5088         declarations; add `unused' attributes; insert some appropriate
5089         casts.
5090
5091         * cmdline.c: (parse_command_line) Add new --testing-mode flag.
5092
5093         * command.c: (shell) Make static.
5094         (run_command) Make static.
5095
5096         * data-list.c: (dump_fixed_table) Remove use of local_strdup().
5097
5098         * dfm.c: (cmd_begin_data) I18n fix.
5099
5100         * error.c: (verbose_msg) Define if __STRICT_ANSI__.
5101
5102         * error.h: (macro verbose_msg) Define if __STRICT_ANSI__.
5103
5104         * expr-opt.c: (evaluate_tree) Don't initialize local arrays if
5105         __STRICT_ANSI__.
5106
5107         * file-handle.q: Don't prepend the source file directory name to
5108         the data file name.  (Ongoing issue.)
5109         (prepend_current_directory) Comment out.
5110         (internal_cmd_file_handle) Don't call prepend_current_directory().
5111         (fh_get_handle_by_filename) Ditto.
5112
5113         * filename.c: Append zero byte to readlink() return value.
5114
5115         * getline.c: (getl_read_line) I18n fix.
5116
5117         * lexer.h: Don't use gcc features if __STRICT_ANSI__.
5118
5119         * misc.h: Don't use gcc features if __STRICT_ANSI__.
5120
5121         * pfm-write.c: (bufwrite) Don't try to increment a void * pointer
5122         directly.
5123
5124         * postscript.c: (output_encodings) Don't use local_strdup().
5125         (postopen) Ditto.
5126
5127         * print.c: Don't use gcc features if __STRICT_ANSI__.
5128
5129         * q2c.c: (dump_vars) Don't put a , at the end of the last enum.
5130
5131         * recode.c: (parse_src_spec) Fully brace nested if's.
5132
5133         * set.q: (global var set_testing_mode) New var.
5134
5135 Wed Jul 29 22:01:44 1998  Ben Pfaff  <blp@gnu.org>
5136
5137         * ascii.c: Add some more `unused' attributes that only come into
5138         play when NDEBUG is defined.
5139         (ascii_close_page) Set s_len when reallocating s.
5140         
5141         * crosstabs.q: (delete_missing) New function.
5142         (output_pivot_table) Call delete_missing() if /MISSING=REPORT.
5143         (make_summary_table) Create summary table reallocable.
5144
5145         * postscript.c: Add more `unused' attributes as above.
5146
5147         * tab.c: (tab_create) [GLOBAL_DEBUGGING] Set reallocable member.
5148         (tab_realloc) [GLOBAL_DEBUGGING] Assert that table is reallocable.
5149          
5150         * tab.h: (struct tab_table) [GLOBAL_DEBUGGING] New `reallocable'
5151         member.
5152
5153         * var.h: (macro force_dup_variable) [!GLOBAL_DEBUGGING] Remove
5154         gratuitous space between parameter definition.
5155
5156         * vars-atr.c: Changed some assert(0)'s to abort()'s to prevent
5157         complaints about running off the end of functions with NDEBUG
5158         enabled.
5159
5160 Sun Jul  5 00:17:25 1998  Ben Pfaff  <blp@gnu.org>
5161
5162         * Several source files: Removed some PORTME notes when reflection
5163         revealed that ANSI forbids that sort of breakage.  Also, added
5164         lots of `unused' qualifiers here and there.
5165
5166         * aggregate.c: (accumulate_aggregate_info) Remove local var
5167         weighting that turned out not to be used.
5168
5169         * avl.c: Update to version 1.1.0.  Add unused specifier.
5170         (avl_destroy) Initialize ab to 0.  Comment fixes.  Cast return
5171         value to void *.
5172         (avl_probe) Replace some instances of 1 with +1 where appropriate.
5173         (avl_find) Cast return value to void *.
5174         (avl_delete) q doesn't need to be initialized at the beginning of
5175         the function.  Replace some instances of 1 with +1.
5176         (force_avl_delete) Renamed avl_force_delete, all references changed.
5177         (compare_ints) `param' marked unused.
5178         (print_int) `param' marked unused.
5179         (recurse_tree) Replace some instances of 1 with +1.
5180
5181         * avl.h: Update to version 1.1.0.  Only declares avl function
5182         types if not already declared.
5183         (AVL_MAX_HEIGHT) Only define if not already defined.
5184         (struct avl_node) New unused member char pad[2].
5185         [GLOBAL_DEBUGGING] Change conditionalization to NDEBUG instead.
5186         (force_avl_insert) Renamed avl_force_insert.
5187         (force_avl_delete) Renamed avl_force_delete.
5188
5189         * crosstabs.q: (struct table_entry) Put `freq' into a union with
5190         new member `data'.
5191         (struct crosstab) Add new member `ofs'.
5192         (glob var int_tab) Removed.
5193         (custom_tables) In integer mode, assign v[i] properly through the
5194         indirect var_dict.
5195         (custom_variables) Now p.crs.max == max + 1.
5196         [DEBUGGING] (debug_print) p.crs.min and p.crs.max are now ints.
5197         (precalc) Implement integer mode.
5198         (calc_integer) Implement integer mode.
5199         (compare_table_entry) Remove unused local variable `comparing'.
5200         (make_summary_table) Implement integer mode.
5201         (macro ns_rows) Implemented as static variable now.
5202         (several variables) Made static, from global.
5203         (output_pivot_table) Use table_value_missing() for column heads.
5204         Remove several unused local variables.  Implement integer mode
5205         table summing.  Count up ns_rows.
5206         (crosstabs_dim) Make columns wider when /MISSING=REPORT requested.
5207         (find_pivot_extent) Moved into find_pivot_extent_general; now just
5208         calls that function or find_pivot_extent_integer.
5209         (find_pivot_extent_integer) New function.
5210         (enum_var_values) Implemented for integer mode.
5211         (table_value_missing) New function.
5212         (display_dimensions) Call table_value_missing() for heads.
5213         (float_M_suffix) New function.
5214         (display_crosstabulation) Call table_value_missing() for row
5215         heads.  Handle missing values in /MISSING=REPORT mode.
5216         (calc_fisher) Remove unused var N.
5217         (calc_r) Remove unused var fact.
5218
5219         * data-list.c: (dump_fixed_table) Fix table dimensioning.
5220         (read_one_set_of_repetitions) Remove unused vars var_spec, column.
5221
5222         * data-out.c: (insert_commas) Remove unused var cp.
5223         (convert_CCx) Remove unused vars save_set_decimal,
5224         save_set_grouping.
5225
5226         * descript.q: (dump_z_table) Fix table dimensioning.
5227         (pre_calc) Remove unused var j.
5228         (display) Remove unused vars title, s.  Fix table dimensioning.
5229
5230         * expr-evl.c: Comment fixes.
5231
5232         * frequencies.q: (full_dim) New function.
5233         (dump_full) Fix table dimensioning.
5234         (condensed_dim) New function.
5235         (dump_condensed) Fix table dimensioning.
5236
5237         * get.c: (cmd_match_files) Remove unused var n_val.  Remove unused
5238         label winnage.
5239
5240         * html.c: (html_close_drive) Remove unused var i.
5241         (postopen) Remove unused vars title, curfn_len, cp.
5242         (preclose) Remove unused vars this, x.
5243
5244         * lexer.c: Comment fixes.
5245
5246         * matrix-data.c: (cmd_matrix_data) Remove unused var index.
5247
5248         * means.q: (custom_tables) Remove unused var m_dim.
5249
5250         * mis-val.c: Format fix.
5251
5252         * modify-vars.c: (cmd_modify_vars) Remove unused var new_dict.
5253
5254         * output.c: (outp_get_paper_size) Remove unused var cp.
5255
5256         * pfm-read.c: (read_float) Remove unused var save, unused label
5257         underflow.
5258         (read_variables) Remove unused vars cp, j.
5259         (read_value_label) Remove unused var j.
5260
5261         * pfm-write.c: (bufwrite) Remove unused var i.
5262
5263         * postscript.c: (ps_postopen_drive) Remove unused vars dev_info,
5264         fn.
5265         (output_encodings) Remove unused vars char_cp, n_output.
5266         (read_ps_encodings) Remove unused var ep.
5267         (postopen) Remove unused var title.
5268         (preclose) Remove unused var fp.
5269         (ps_open_page) Remove unused vars true, false, orientation,
5270         mirror_horz, mirror_vert, width, length.
5271         (ps_text_metrics) Remove unused var x.
5272
5273         * q2c.c: (find_symbol) Remove unused var y.
5274         (parse_setting) Remove unused parameter sbc, all references
5275         changed.
5276         (dump_parser) Remove unused var cp.
5277         (dump_free) Remove unused var i.
5278
5279         * set.q: (static vars args, n) Removed.
5280         (internal_cmd_gset) Removed.
5281
5282         * sfm-read.c: (sfm_read_dictionary) Removed unused var i.
5283         (read_machine_flt64_info) Removed unused var file_endian.
5284         (read_documents) Removed unused var i.
5285         (read_compressed_data) Removed unused parameter dict, all
5286         references changed.
5287
5288         * sfm-write.c: (bufwrite) Removed unused var i.
5289         (sfm_write_case) Removed unused var i.
5290
5291         * sort.c: (merge_once) Remove unused var t.
5292         (write_separate) #if 0 out as dead code.
5293
5294         * split-file.c: (cmd_split_file) Remove unused var i.
5295
5296         * sysfile-info.c: (sysfile_info_dim) New function.
5297         (cmd_sysfile_info) Fix table dimensioning.
5298         (variables_dim) New function.
5299         (display_variables) Fix table dimensioning.
5300         (describe_variable) Remove unused var prev_r.
5301
5302         * t-test.q: (z_postcalc) Removed.
5303         (pairs_calc) Remove unused var bad_weight.
5304         (postcalc) Remove unused vars dfn, dfd.
5305
5306         * tab.c: (tab_create) Set t->dim to NULL.
5307         (tab_dim) Make sure t->dim is NULL first.
5308         (tab_natural_width) Remove parameter `clamp'.
5309         (tab_value) Remove duplicate assertion for table.
5310         (tab_raw) New function.
5311         (nowrap_dim) New function.
5312         (wrap_dim) New function.
5313         (tab_output_text) Fix table dimensioning.
5314
5315         * tab.h: (tab_raw) New macro.
5316
5317         * val-labs.c: (get_label) Remove unused var type.
5318         (copy_value_labels) Remove unused var trav.
5319
5320         * var.h: (struct crosstab_proc) Completely changed.
5321
5322         * vars-prs.c: (parse_dict_variable) Remove unused var v.
5323
5324         * vfm.c: (open_active_file) Remove unused vars i, lp.
5325
5326         * weight.c: (weight_trns_proc) #if 0 out as dead code.
5327         
5328 Tue Jun  2 23:37:21 1998  Ben Pfaff  <blp@gnu.org>
5329
5330         * Makefile.am: Add apply-dict.c, flip.c.
5331
5332         * apply-dict.c: New file.
5333         
5334         * command.c: (struct command) Make cmd[] larger for CLEAR
5335         TRANSFORMATIONS command name.
5336         (parse_cmd) Make sure we're in a valid state before using it as an
5337         index.  Discard variables and reset state on invalid transitions.
5338         (cmd_clear_transformations) New function.
5339
5340         * command.def: Add APPLY DICTIONARY, CLEAR TRANSFORMATIONS, FLIP.
5341         Add unimplemented PRESERVE, RESTORE.
5342
5343         * file-handle.h: Include stddef.h.
5344
5345         * flip.c: New file.
5346         
5347         * pfm-read.c: (parse_value) Pad value label values with spaces,
5348         not nulls.
5349
5350         * sfm-read.c: (struct sfm_fhuser_ext) Add reference count.
5351         (sfm_close) Decrement reference count, make sure it's zero.
5352         (sfm_maybe_close) New function.
5353         (sfm_read_dictionary) Handle reference counts.
5354
5355         * vars-atr.c: (clear_default_dict) New function.
5356         (discard_variables) Use clear_default_dict().
5357
5358 Sun May 31 00:58:05 1998  Ben Pfaff  <blp@gnu.org>
5359
5360         * Makefile.am: Add pfm-write.c.
5361         (LDADD) Add the libgmp2 libraries.
5362
5363         * command.def: Define EXPORT.
5364
5365         * get.c: (cmd_export) New function.
5366         (export_write_case_func) New function.
5367
5368         * pfm-read.c: (static spss2ascii[]) Make it const.
5369
5370         * pfm-write.c: New file.
5371
5372         * sfm-write.c: Formatting, comment fixes.
5373
5374         * var.h: Comment fix.
5375
5376 Fri May 29 21:44:12 1998  Ben Pfaff  <blp@gnu.org>
5377
5378         * Makefile.am: Add pfm.h, pfm-read.c.
5379
5380         * command.def: IMPORT is now implemented.
5381
5382         * format.c: (glob var translate_fmt[]) New var.
5383
5384         * get.c: (enum GTSV_NONE) Renamed GTSV_OPT_NONE.
5385         (cmd_import) New function.
5386         (import_source_read) New function.
5387         (glob var import_source) New var.
5388
5389         * pfm-read.c: New file.
5390
5391         * pfm.h: New file.
5392         
5393         * sfm-read.c: (parse_format_spec) Local variable translate_fmt[]
5394         moved in format.c.
5395         (dump_dictionary) Disabled printing a couple of items.
5396
5397 Mon May 25 12:42:37 1998  Ben Pfaff  <blp@gnu.org>
5398
5399         * crosstabs.q: (postcalc) Call make_summary_table().
5400         (make_summary_table) New function.
5401         (insert_summary) New function.
5402         (display_dimensions) Remove some unnecessary arguments, all
5403         references changed.
5404         (output_pivot_table) Fix lots of problems with the risk table
5405         setup.
5406         (submit) Don't display an empty table.
5407         (display_risk) Fix order of arguments to calc_risk().
5408
5409         * glob.c: Always include assert.h and stdlib.h.
5410
5411         * output.h: (enum OUTP_T_JUST_FULL) Removed, all references
5412         removed.
5413
5414         * tab.c: (tab_create) Cosmetic changes.
5415
5416         * tab.h: (enum TAB_JUSTIFY) Removed, all references removed.
5417
5418 Sun May 24 22:39:23 1998  Ben Pfaff  <blp@gnu.org>
5419
5420         * tab.def: Removed.
5421
5422         * crosstabs.q: (output_pivot_table) Headers drawing and submission
5423         code simplified, moved into new function submit().
5424         (submit) New function.
5425         (crosstabs_dim) New function.
5426         (display_directional) Substitute variable names for %s where
5427         appropriate.
5428         (somers_d_v[], somers_d_ase[], somers_d_t[]) New static vars.
5429         (calc_symmetric) Initialize parameters only if non-NULL.
5430         Calculate Somers' d.
5431         (calc_directional) Calculate Somers' d (or copy it, really).
5432         Calculate eta.
5433
5434         * output.c: (outp_string_width) New function.
5435
5436         * postscript.c: (postopen) Calculate font widths based on the
5437         width of the zero '0' character, not the width of the space
5438         character.  Set paper-width and paper-length based on points, not
5439         device units.
5440         (ps_open_page) Fix page setup string for landscape mode.
5441
5442         * som.h: (struct som_dimension) Removed.
5443         (struct som_table_class) height, width members take int * not
5444         som_dimesion * now.
5445
5446         * tab.c: Many functions now have added parameter validation.
5447         (tab_height, tab_width) These functions were removed and merged
5448         into a single function tab_resize(), and all references changed.
5449         (tab_dim) Rewritten since the interface changed; reduced from
5450         hundreds of lines to two.  All callers were changed.  Currently
5451         most of them just use tab_natural_dimensions as their callback and
5452         await detailed translation of functionality.
5453         (tab_natural_width) New function.
5454         (tab_natural_height) New function.
5455         (tab_natural_dimensions) New function.  This is a callback
5456         function, not something that you'd want to call directly.
5457         (tab_nat_dim) Removed.
5458         (tabi_table) Allocates t->w and t->h.
5459         (tabi_driver) Inlined sum_columns()'s functionality.  Calls the
5460         dimensions callback.
5461         (evaluate_dimensions) Removed.
5462         (sum_columns) Removed.
5463
5464         * tab.h: (enum TAL_1THIN) Removed.
5465         (enum series t_*) Removed.
5466         (struct tab_table) Members trh, trv changed to unsigned char *
5467         from int *.  Member dim changed to a function pointer from a
5468         unsigned char *.  Member max_stack_height removed.  New members
5469         hr_tot, vr_tot.
5470         (macros tab_l, tab_r, tab_t, tab_b) New.
5471
5472 Sat May 23 23:22:13 1998  Ben Pfaff  <blp@gnu.org>
5473
5474         * ascii.c: (delineate) Assign last_space_nchars before skipping
5475         spaces, to fix right justification.
5476
5477         * crosstabs.q: (static vars risk, direct) New vars.
5478         (static var pearson_r) Removed.
5479         (glob var chisq_fisher) Made static.
5480         (static vars row_tot[], col_tot[]) Don't include grand total
5481         anymore.
5482         (static var grand_total) Renamed W, all references changed.
5483         (output_pivot_table) Only make `table' if num_cells != 0.  Make
5484         risk and directional tables.  Deal with grand total no longer part
5485         of col_tot[].  Free rows and cols after we're done with them.
5486         (display_risk) New function.
5487         (display_directional) New function.
5488         (clac_r) Rewritten so that it stores all its results into its
5489         arguments, so it can be used for Spearman's correlation too.
5490         (calc_symmetric) Added a t[] argument, all references changed.
5491         Calculates ASEs for tau-b, tau-c, gamma.  Calculates Spearman's r,
5492         Pearson's r, Cohen's kappa.
5493         (calc_risk) New function.
5494         (calc_directional) New function.
5495
5496         * som.c: (som_submit) Improved debugging code.
5497
5498         * stats.c: (hypercube) New function.
5499         (cube) New function.
5500         (sqr) New function.
5501         (normal_sig) Went back to old implementation, which actually
5502         worked.
5503
5504         * stats.h: (macros square, cube, hypercube) Removed.  The
5505         equivalent functions in stats.c are inlined here; all references
5506         to square changed to sqr.
5507
5508 Fri May 22 00:03:41 1998  Ben Pfaff  <blp@gnu.org>
5509
5510         * crosstabs.q: (N_SYMMETRIC) New define.
5511         (postcalc) Disable debug printing.
5512         (static vars chisq_fisher, pearson_r) New.
5513         (output_pivot_table) Add support for symmetric measures.  Add
5514         chi-square output of exact sigs.
5515         (display_chisq) Rewritten.
5516         (display_symmetric) New function.
5517         (gamma_int) New function.
5518         (Pr) New function.
5519         (swap) New function.
5520         (calc_fisher) New function.
5521         (calc_chisq) Check boundary conditions better. Calculate Yates,
5522         Fisher, Mantel-Haenszel tests.
5523         (calc_r) New function.
5524         (calc_symmetric) New function.
5525
5526         * stats.c: (normal_sig) Rewritten with new algorithm.  Renamed
5527         from calc_normal.
5528         (chisq_sig) Better boundary conditions.  Renamed from
5529         calc_significance.
5530
5531         * tab.h: (struct tab_table) New member cf.
5532
5533         * tab.c: (tab_create) Set cf.
5534         (tab_width) New function.
5535         (tab_realloc) Handle cf.
5536         (tab_vline) Handle cf.
5537         (tab_hline) Handle cf.
5538         (tab_box) Handle cf.
5539         (tab_value) Handle cf.
5540         (tab_float) Handle cf.
5541         (tab_text) Handle cf.
5542         (tab_joint_text) Handle cf.
5543         (tab_offset) Handle cf.
5544         (tab_next_row) Handle cf.
5545         (evaluate_dimensions) Handle cf.
5546         (render_strip) Handle cf.
5547
5548 Wed May 20 00:03:59 1998  Ben Pfaff  <blp@gnu.org>
5549
5550         * crosstabs.q: (postcalc) New vars row_tot, col_tot, pass them to
5551         output_pivot_table().
5552         (output_pivot_table) Moved lots of local variables outside and
5553         made them static.  Add beginnings of chi-square statistic
5554         support.  Now column and row totals aren't in the main matrix.
5555         Always zero out any leftover rows & columns after we're done with
5556         the table entries.  Move all output stuff into
5557         display_dimensions(), display_crosstabs(), display_chisq().
5558         (display_dimensions) New function.
5559         (display_crosstabulation) New function.
5560         (display_chisq) New function.
5561         (calc_chisq) Implemented Pearson and likelihood-ratio chisquares.
5562
5563         * frequencies.q: (dump_full, dump_condensed) Remove tab_null()
5564         references, simplify logic.
5565
5566         * postscript.c: Remove scale, translate-x, translate-y,
5567         mirror-horz, mirror-vert, rotate-180 options.
5568         (struct ps_driver_ext) Remove scale, translate_x, translate_y.
5569         All references deleted.
5570         (macro YT) New macro.
5571         (array option_tab[]) Removed options.
5572         (ps_option) Removed options.
5573         (ps_open_page) Write page setup explicitly to output file, without
5574         using now-deleted BP function.
5575         (macro dump_line) Use YT().
5576         (macro dump_thick_line) Use YT().
5577         (draw_headers) Use YT().
5578         (switch_font) Reorder arguments to SF function.
5579         (write_text) Use YT().
5580
5581         * sfm-read.c: (sfm_read_case) Don't attempt to read variables that
5582         have get.fv == -1.
5583
5584         * sysfile-info.c: (describe_variables) Don't use tab_nulls().
5585
5586         * tab.c: (tab_create) Initialize t->ct to zeros.  Remove
5587         null-debugging code.
5588         (tab_realloc) Remove null-debugging code.  Initialize new regions
5589         of t->ct to zeros.
5590         (tab_vline) Support offsets.
5591         (tab_hline) Support offsets.
5592         (tab_box) Support offsets.
5593         (tab_null) Removed.
5594         (tab_nulls) Removed.
5595         (tab_row) Removed.
5596         (tab_col) Removed.
5597         (evaluate_dimensions) Remove null-debugging code.  Understand
5598         TAB_EMPTY attribute.  Assert that text.s.s is always non-NULL if
5599         TAB_EMPTY not present.
5600
5601         * tab.h: New cell attribute TAB_EMPTY.
5602         (macros tab_nr, tab_nc, tab_row, tab_col) New.
5603
5604         * vars-atr.c: (init_variable) Set get.fv to -1 so that GET doesn't
5605         try to read them from system files.
5606
5607         * vfm.c: (dump_splits) Don't call tab_null().   
5608
5609 Sat May 16 19:36:55 1998  Ben Pfaff  <blp@gnu.org>
5610
5611         * crosstabs.q: (struct crosstab) Added `missing' member.
5612         (custom_tables) Init missing.
5613         (calc_general) Handle missing values.
5614         (calc_chisq) New function.
5615         (output_pivot_table) Start work on chi-square output.  Update for
5616         new tab offset support functions.  Shorten statistic names.
5617
5618         * Several files: add in more `const's to placate gcc's warnings.
5619
5620         * tab.h: (struct tab_table) Add col_ofs, row_ofs members.  Comment
5621         fixes.
5622
5623         * tab.c: (tab_height, tab_realloc, tab_vline, tab_hline, tab_box,
5624         tab_null, tab_nulls, tab_value, tab_float, tab_text,
5625         tab_joint_text) Add col_ofs and row_ofs support.
5626         (tab_offset) New function.
5627         (tab_next_row) New function.
5628         (tab_row) New function.
5629         (tab_col) New function.
5630         (tabi_table) Add col_ofs and row_ofs support.
5631
5632         * vars-atr.c: (is_system_missing) New function.
5633
5634 Tue May 12 16:14:30 1998  Ben Pfaff  <blp@gnu.org>
5635
5636         * crosstabs.q: Expanded subcommand names RESID --> RESIDUAL, etc.
5637         (static var no_cells) Removed.
5638         (static var num_cells) New.
5639         (static var expected) New.
5640         (static var cells[]) New.
5641         (internal_cmd_crosstabs) Deal with new variables.
5642         (postcalc) Removed most of the meat and put it in new function
5643         output_pivot_table().
5644         (output_pivot_table) Calculates and outputs an entire pivot table.
5645
5646         * postscript.c: (postopen) Fix problems with free()ing addresses
5647         not obtained from malloc().
5648
5649         * som.c: (som_submit) Add assertion.
5650
5651         * sysfile-info.c: (describe_variable) Use new tab_nulls()
5652         function.
5653
5654         * tab.c: (static var tab_names[]) New.
5655         (tab_realloc) -1 for nc or nr indicates no change.
5656         (tab_nulls) New function.
5657         (tab_dim) Use tab_names[].
5658         (tabi_cumulate) Don't include bottom or right headers.  Furrfu.
5659         (evaluate_dimensions) Don't terminate on uninited cells, just put
5660         an X in them and emit a notice.  Use tab_names[].
5661
5662         * tab.h: Move bits into tab.def.
5663
5664         * tab.def: New.  Don't try to declare tab_table_class because then
5665         som.h has to be included.       
5666         
5667 Thu May  7 22:55:04 1998  Ben Pfaff  <blp@gnu.org>
5668
5669         * command.def: New file, contains all the command definitions
5670         previously included bodily in command.c.
5671
5672         * format.def: New file, contains all of the format definitions
5673         previously split across format.h, format.c, and sfm-write.c.
5674
5675         * lexer.h: Renamed from tokens.h in order to match corresponding
5676         .c file name.
5677
5678         * lexerP.h: Moved some rarely used functions exported by lexer.c
5679         into here.
5680
5681         * Makefile.am: Commemorate renamed files.
5682         (EXTRA_DIST) Add command.def, format.def.
5683
5684         * command.c: [0] (walk_cmdtable_func) Removed.
5685
5686         * crosstabs.q: (postcalc) Made it work and print out matrices
5687         proving it.
5688         (enum_column_values) Renamed enum_var_values, generalized for any
5689         variable.
5690
5691         * format.h: (struct fmt_desc) New member `spss'.
5692
5693         * q2c.c: (main) Generated code includes lexer.h instead of
5694         tokens.h.
5695
5696         * sfm-write.c: (write_format_spec) Use new spss member of fmt_spec
5697         instead of an independent translation table.
5698
5699 Tue May  5 13:19:03 1998  Ben Pfaff  <blp@gnu.org>
5700
5701         * Lots of source files: Added const to declarations.
5702
5703         * aggregate.c: (parse_aggregate_function) Rename inner i to j.
5704         
5705         * arena.c: (arena_clear) Set prev pointer to null when done.
5706
5707         * ascii.c: (ascii_option) Rename index as indx.
5708
5709         * avl.c: This is now a separate library called libavl.
5710         (xmalloc) Make static.
5711         (avl_probe) Step A7 can use the cache instead of an explicit
5712         compare.
5713         (avl_delete) Don't maintain a q pointer because it's always
5714         available in the pointer stack.  Comment fix.
5715
5716         * avl.h: This is now a separate library called libavl.
5717
5718         * command.c: (cmd_table[]) Remove spurious trailing "".
5719
5720         * common.h: Only include random() fix if this system needs it.
5721
5722         * crosstabs.q: Include alloca headers.
5723         (n_sorted_tab) New global var.
5724         (postcalc) Mostly rewritten.
5725         (find_pivot_extent) Rewritten.
5726         (enum_column_values) Rewritten.
5727
5728         * data-out.c: (convert_F) Rename inner n as n_spaces.
5729
5730         * error.c: (dump_message) Don't have an outer var i.
5731
5732         * file-handle.q: (static var f) Removed.  All references removed.
5733         (internal_cmd_file_handle) Uses a local variable instead of f.
5734
5735         * get.c: (trim_dictionary) Change scope of i, i1, i2.
5736         (cmd_match_files) Don't strcpy tokstr into sbc (why was this ever
5737         done?)
5738
5739         * getline.h: Declare getl_history as extern.  Reported by
5740         palme@uni-wuppertal.de (Hubert Palme).
5741
5742         * postscript.c: (postopen) Some large mods for constness.
5743
5744         * recode.c: Remove spurious copyrights since PSPP is owned by FSF
5745         anyway.
5746
5747 Fri Apr 24 12:52:47 1998  Ben Pfaff  <blp@gnu.org>
5748
5749         * Makefile.am: Rename BUILT_SOURCES to q_sources, all references
5750         changed.  Add avl.c, avl.h to pspp_SOURCES.  Remove avllib from
5751         LDADD.
5752
5753         * avl.c, avl.h: New files.  These form a clean-room
5754         reimplementation of avllib.  Iterative algorithms are used in
5755         place of recursive ones, so there is no resemblance in the code.
5756
5757         * Lots of headers: Don't include other headers by default.
5758
5759         * Lots of source files: Explicitly include all needed headers.
5760
5761         * arena.c: (arena_clear) New function.
5762
5763         * crosstabs.q: (ROW_VAR, COL_VAR) New enums.
5764         (static var ar) Removed.
5765         (staitc vars ar_tc, ar_col) New.
5766         (cmd_crosstabs) Destroy the arenas.
5767         (internal_cmd_crosstabs) Create the arenas.
5768         (precalc) Don't need a free function for the hash.
5769         (calc_general) Make sure to zero out the trailer on the key data
5770         before inserting.
5771         (print_table_entries) Updated.
5772         (postcalc) Worked on actually implementing.
5773         (find_pivot_extent) New function.
5774         (compare_value) New function.
5775         (enum_column_values) New function.
5776
5777         * data-in.c: (parse_month) Make local array `static const'.
5778         
5779         * data-out.c: (convert_date) Make local array `static const'.
5780         (convert_WKDAY) Same.
5781         (convert_MONTH) Same.
5782
5783         * frequencies.q: (postprocess_freq_tab) avl_walk_inorder() has
5784         been renamed to avl_walk().
5785         
5786         * hash.c: Rewritten more efficiently.
5787
5788         * hash.h: Add attribute const to hsh_next_prime declaration.
5789
5790         * lexer.c: (id_match) Make arguments const.
5791
5792         * postscript.c: (ps_postopen_driver) Make default fonts the
5793         Helvetica family.
5794
5795         * q2c.c: (main) Generated code needs stdlib.h.
5796
5797         * sfm-write.c: (write_value_labels) An avl_traverser needs to be
5798         initialized to 0 now, not to NULL.  All other references to
5799         avl_traverser were updated in the same way.
5800
5801         * tokens.h: Macro version of id_match updated to use const
5802         properly.
5803
5804         * val-labs.c: (inc_ref_count) New function.
5805         (copy_value_labels) Simply through use of new avl_copy() function.
5806
5807 Wed Apr 15 13:01:58 1998  Ben Pfaff  <blp@gnu.org>
5808
5809         * crosstabs.q: Probably doesn't compile.  New PIVOT subcommand.
5810         (postcalc) Worked on this.
5811
5812         * postscript.c: (OPO_DOUBLE_LINE) New enum.
5813         (struct ps_driver_ext) New line_width_thick member.
5814         (ps_preopen_drive) Init line_width_thick.
5815         (option_tab[]) Add line-* options.
5816         (ps_option) Parse line-* options.
5817         (postopen) Add line_width_thick support.  Strip leading spaces on
5818         prologue output lines.
5819         (ps_open_page) Include line_width_thick in output.
5820         (macro dump_thick_line) New.
5821         (dump_fancy_line) Support thick lines as well as double lines.
5822
5823 Tue Apr 14 00:50:08 1998  Ben Pfaff  <blp@gnu.org>
5824
5825         * Makefile.am: Add crosstabs.c to BUILT_SOURCES.  Add crosstabs.q
5826         to pspp_SOURCES.  Add crosstabs.q to EXTRA_DIST.
5827
5828         * Many source files: Rename `options' to `pv_opts' as appropriate.
5829
5830         * command.c: (static var cmd_table[]) Add CROSSTABS command.
5831
5832         * common.c: (xcalloc) New function.
5833
5834         * crosstabs.q: New file.  Not finished yet, though.
5835                 
5836         * data-list.c: Comment fix.
5837
5838         * error.c: Remove some old Checker cruft.
5839
5840         * frequencies.q: (dump_full) Cumulate valid percent instead of
5841         regular percent.
5842
5843         * getline.c: Comment fix.
5844
5845         * hash.c: Comment fixes.
5846
5847         * hash.h: (struct hsh_table) Make hash functions return unsigned
5848         instead of int to avoid problems with taking the modulo of
5849         negative return values.  All references changed.
5850
5851         * misc.c: (intlog10) Make its table static const instead of auto.
5852
5853         * sfm-read.c: (read_header) Make `prefix' static const instead of
5854         auto.
5855
5856         * var.h: (union value) Add member `hash'.
5857         (struct variable) Rename prv_index as `foo'--all references
5858         changed.  Reorder.
5859         (typedef pv_opts) Removed.  All references changed.
5860
5861         * vars-prs.c: (parse_variables) Message fixes.
5862         
5863 Mon Mar  9 15:35:08 1998  Ben Pfaff  <blp@gnu.org>
5864
5865         * get.c: (cmd_match_files) Don't reverse the order of FILEs as
5866         they are being inserted.  Don't check for BY variables of
5867         different types.  Discard variables if the active file isn't
5868         included in the merge.
5869         (mtf_processing) Essentially rewritten.
5870         (mtf_merge_dictionary) Check for master/slave variables of
5871         different types/widths.
5872
5873         * vfm.c: (static var not_canceled) New var.
5874         (process_active_file) Don't call vfm_source->read() if
5875         there's no vfm-source.  Initialize not_canceled.
5876         (process_active_file_write_case) Honor and update not_canceled.
5877         (prepare_for_writing) Rollback changes from yesterday, they were
5878         wrong.
5879         (close_active_file) Don't destroy vfm_source unless it exists.
5880         
5881 Mon Mar  9 00:56:16 1998  Ben Pfaff  <blp@gnu.org>
5882
5883         * Lots of source files: Added { } around nested if/else constructs
5884         to avoid new gcc 2.8 warnings.
5885
5886         * data-in.c: (parse_Z) Declare `int' type explicitly.
5887         (convert_Z) Ditto.
5888
5889         * get.c: (struct mtf_file) Add prev, next_min, by, input members.
5890         (cmd_match_files) Initialize mtf_by_values.  Manage by, input,
5891         prev members.  Put TABLEs at the end of the chain and FILEs at the
5892         beginning.  Don't allow the active file in STATE_INIT.  Use proper
5893         `seen' value for the active file.  Fill out the by members and
5894         make sure they're of consistent type.  Do the actual merge
5895         operation.
5896         (mtf_processing_finish) New function.
5897         (var_type_description) New function.
5898         (mtf_free_file) New function.
5899         (mtf_free) Rewritten.
5900         (mtf_delete_file_in_place) New function.
5901         (mtf_read_nonactive_records) New function.
5902         (mtf_compare_BY_values) New function.
5903         (static var mtf_seq_no) New var.
5904         (mtf_processing) New function.
5905         (mtf_merge_dictionary) Assign nval members for the system file
5906         dictionary.  Assign fv values for its variables.  Point each slave
5907         variable to the corresponding master variable.
5908
5909         * hash.c: Include str.h.
5910
5911         * mis-val.c: (copy_missing_values) src arg is const.
5912
5913         * misc.c: (spacing) Make `max' var explicitly int.
5914
5915         * sfm-read.c: (dump_dictionary) Message reformatting.
5916         (sfm_read_case) Add assertion.
5917
5918         * sort.c: Esthetic fixes.
5919
5920         * var.h: (struct match_files_proc) New struct.
5921         (struct variable) Add private data match_files_proc.
5922
5923         * vars-atr.c: (delete_variable) Implement.  Add argument for the
5924         dictionary that owning the variable.
5925         (dup_variable) Add assertion.
5926
5927         * vfm.c: Comment fixes, hopefully the comments are correct now.
5928         (process_active_file) New function.
5929         (process_active_file_write_case) New function.
5930         (process_active_file_output_case) New function.
5931         (prepare_for_writing) Use temp_dict->nval for vfm_info, not
5932         default_dict.nval.
5933         (write_case) Renamed procedure_write_case().  Now write_case is a
5934         pointer to a function.  Style fixes.
5935         
5936 1998-03-05  Ben Pfaff  <blp@gnu.org>
5937
5938         * Makefile.am: (q2c) Link with libmisc.
5939         (version.c) Define default_config_path, include_path,
5940         groff_font_path.
5941
5942         * ascii.c: (ascii_postopen_driver) When the default newline string
5943         is requested, open file in text mode.  Suggested by
5944         palme@uni-wuppertal.de (Hubert Palme).
5945         (static vars line_buf, line_p) Change from char * to unsigned char
5946         *.
5947         (ascii_close_page) char * to unsigned char *.
5948
5949         * cmdline.c: (parse_command_line) Implement -r option by
5950         prepending ~/.pspp/rc to the list of files to process.
5951
5952         * command.c: (cmd_remark) Reset getl_prompt to the standard prompt
5953         before pulling in a final line.
5954         (null_func, null_int_func) Removed (dead code).
5955
5956         * descript.q: (display) Calculate width of variable name column
5957         properly.  Calculate number of valid cases properly.  Reported by
5958         palme@uni-wuppertal.de (Hubert Palme).
5959
5960         * filename.c: (init_filename) Use default_config_path instead of
5961         now obsolete CONFIG_PATH.
5962
5963         * getline.c: (getl_initialize) Use include_path instead of now
5964         obsolete INCLUDE_PATH.
5965         (getl_add_file) New argument `where'.  All references changed.
5966
5967         * groff.c: (find_font_file) Use groff_font_path instead of now
5968         obsolete GROFF_FONT_PATH.
5969         
5970         * postscript.c: (find_ps_file) Use groff_font_path instead of now
5971         obsolete GROFF_FONT_PATH.  Copy through temporary variable to
5972         avoid problems with constness.
5973
5974         * str.h: (macro cs_streq) New macro.
5975
5976         * version.h: (glob var default_config_path, include_path,
5977         groff_font_path) New vars.
5978         
5979 1998-02-23  Ben Pfaff  <blp@gnu.org>
5980
5981         * Many source files: Change verbose_msg() priority levels and
5982         messages.
5983
5984         * aggregate.c: Include debug-print.h.
5985
5986         * cmdline.c: (parse_command_line) Add --safer/-s and --command/-c
5987         options.
5988         (static var pre_syntax_message) Document --safer/-s and
5989         --command/-c.
5990
5991         * command.c: (cmd_erase, cmd_host) Disable if set_safer is set.
5992
5993         * dfm.c: (open_inline_file) [__CHECKER__] Zero out ext->file,
5994         because it's not used but it's still copied.
5995         (open_file_r) Remove gratuitous debug message.
5996
5997         * filename.c: (safety_violation) New function.
5998         (open_file) Remove gratuitous debug messages.  Don't allow pipe
5999         files if set_safer is set.
6000
6001         * get.c: Turn off debugging.
6002
6003         * getline.c: (getl_add_virtual_file) New function.
6004         (getl_read_line) Add verbose_msg() call for opening new syntax
6005         file.
6006         (getl_perform_delayed_reset) Add a return value describing whether
6007         any action was taken.  Call reset_eof().
6008
6009         * getline.h: Comment fix.
6010
6011         * groff-font.c: (groff_read_font) Use `goto next_iteration' in
6012         place of incorrect `continue'.  Use strtok_r() instead of
6013         strtok().  Always check strtok_r() return value.
6014         (groff_read_DESC) Use strtok_r() instead of strtok().
6015
6016         * lexer.c: (reset_eof) New function.
6017
6018         * main.c: (parse) Get a token after performing a delayed reset
6019         action; allow empty syntax files.
6020
6021         * postscript.c: (output_encodings) Use strtok_r() instead of
6022         strtok().
6023
6024         * q2c.c: (dump_parser) Use strtok_r() instead of strtok().
6025
6026         * set.q: Comment fixes.
6027         (glob var set_safer) New var.
6028         (internal_cmd_set) Support SAFER.
6029
6030         * str.h: [!HAVE_STRTOK_R] Declare strtok_r() prototype.
6031
6032         * temporary.c: (free_dictionary) Set d->splits to NULL after
6033         freeing.
6034
6035         * vars-atr.c: (clear_variable) Decrement dict->n_splits if
6036         variable deleted, not if it *isn't* deleted.
6037
6038 1998-02-16  Ben Pfaff  <blp@gnu.org>
6039
6040         * command.c: (array cmd_table[]) Add MATCH FILES.
6041
6042         * common.c: Comment fixes.
6043
6044         * data-list.c, dfm.c, error.c, filename.c, list.q, matrix-data.c,
6045         modify-vars.c, postscript.c, sfm-read.c, sfm-write.c, tab.c:
6046         Include alloca.h.  Problem reported by palme@uni-wuppertal.de
6047         (Hubert Palme).
6048
6049         * expr-opt.c: Include str.h.  Problem reported by
6050         palme@uni-wuppertal.de (Hubert Palme).
6051
6052         * get.c: (cmd_get) [DEBUGGING] Update v->p.get to v->get.
6053         (static var mtf_by) Change from char ** to variable **.
6054         (static var mtf_master) New var.
6055         (mtf_merge_dictionary) New function.
6056         (cmd_match_files) Init mtf_master.  Parse mtf_by according to new
6057         var type.  Reorder tests properly.  Initialize file->dict.  Detect
6058         TABLE= without BY=.  Read file dictionaries and merge them.  Give
6059         subcommand name with IN, LAST, FIRST error messages.  Create IN,
6060         LAST, FIRST variables.  Comment fixes.
6061         (mtf_free) Don't free default_dict.  Free mtf_master.
6062
6063         * getline.c: Define getl_mode.  Change getl_buf_size to size_t
6064         from int.
6065         (handle_line_buffer) Cast int to size_t in comparison to avoid
6066         warning.
6067
6068         * getline.h: Declare getl_mode extern.
6069
6070         * groff-font.c: (groff_read_font) Type-fix calls to getline.
6071         (groff_read_DESC) Make line_size a size_t.
6072         (match_tok) Parenthesize name to avoid macro expansion.
6073
6074         * mis-val.c: (copy_missing_values) New function.
6075
6076         * postscript.c: (postopen) Make buf_size a size_t.
6077
6078         * sfm-read.c: (dump_dictionary) Make global from static.  Print
6079         variable info in parts for easier debugging with Checker.
6080
6081         * temporary.c: (copy_variable) Use copy_value_labels().
6082         (new_dictionary) New arg: whether to copy file label, documents.
6083
6084         * val-labs.c: (copy_value_labels) New function.
6085
6086         * var.h: (enums MISSING_*) Add MISSING_COUNT.
6087
6088         * vars-atr.c: [GLOBAL_DEBUGGING] (force_dup_variable) New
6089         function.
6090         (dup_variable) Set prv_index, get.fv, get.nv.
6091
6092 Fri Feb 13 15:38:36 1998  Ben Pfaff  <blp@gnu.org>
6093
6094         * Makefile.am: (pspp_SOURCE) Add htmlP.h.
6095
6096         * Many source files: For ANSI-compliance, add empty statement
6097         after label.  Reported by palme@uni-wuppertal.de (Hubert Palme)
6098         and Micah Altman <maltman@www-vdc.fas.harvard.edu>.
6099
6100         * data-in.c: (parse_numeric) Some header files break on
6101         -DBL_MIN_10_EXP because they get a --; add () for safety.
6102         Reported by palme@uni-wuppertal.de (Hubert Palme).
6103
6104         * dfm.c: Idea by Dr Eberhard W Lisse <el@linux.lisse.na>.
6105         (struct dfm_fhuser_ext) Change `file' from FILE * to file_ext.
6106         (dfm_close) Use close_file_ext.
6107         (open_inline_file) Set file.file to NULL, not file.
6108         (open_file_r, open_file_w) Initialize file.file; fill in file_ext
6109         struct and use open_file_ext().
6110         (read_record) Use file.file.
6111
6112         * file-handle.q: (prepend_current_directory) Pass through special
6113         filenames.
6114
6115         * filename.c: Only include unistd.h if HAVE_UNISTD_H.
6116         (normalize_filename) Pass through special filenames.
6117         (open_file, close_file) Accept pipe| and |pipe syntaxes as
6118         equivalent.
6119         (dirname) Rename blp_dirname() because of name conflict on some
6120         OS.  All references changed.  Reported by palme@uni-wuppertal.de
6121         (Hubert Palme).
6122         (is_special_filename) New function.
6123
6124         * get.c: (GTSV_OPT*) Add GTSV_OPT_MATCH_FILES.
6125         (trim_dictionary) Conditionalize some of the options on whether
6126         GTSV_OPT_MATCH_FILES is in *options.
6127         (rename_variables) Don't allow variables to be renamed as scratch
6128         variables.
6129         (MTF_*) New enum series.
6130         (struct mtf_file) New struct.
6131         (static vars mtf_head, mtf_tail, mtf_by, mtf_n_by, mtf_free) New
6132         vars.
6133         (cmd_match_files, mtf_free) New functions.
6134
6135         * lexer.c: (match_int) Needed parentheses around name to escape
6136         macro expansion.  Reported by Micah Altman
6137         <maltman@www-vdc.fas.harvard.edu>.
6138
6139         * print.c: Needed to include alloca.h.  Reported by Micah Altman
6140         <maltman@www-vdc.fas.harvard.edu>.
6141
6142         * recode.c: (convert_to_double) Parenthesize -DBL_MIN_10_EXP to
6143         -(DBL_MIN_10_EXP).  Reported by palme@uni-wuppertal.de (Hubert
6144         Palme).
6145         
6146         * str.h: Include stdarg.h.  Reported by palme@uni-wuppertal.de
6147         (Hubert Palme) and Micah Altman <maltman@www-vdc.fas.harvard.edu>.
6148
6149 Thu Feb  5 00:18:21 1998  Ben Pfaff  <blp@gnu.org>
6150
6151         * html.c: (struct html_driver_ext) Move into htmlP.h.
6152         (html_preopen_driver) Initialize cp_x, cp_y.
6153         (html_submit) Implement as call to output_tab_table().
6154         (change_attributes) New function.
6155         (escape_string) New function.
6156         (output_tab_table) New function.
6157
6158         * list.q: (write_all_headers) Add code for writing headers for the
6159         html driver.
6160         (clean_up) Write out the html close-table tag.
6161         (determine_layout) Ignore html driver.
6162         (list_cases) Write html data.
6163
6164         * som.c: (som_submit) Move more of the code into output_table().
6165
6166         * tab.c: (static var hit) Make a global var and rename tab_hit.
6167         (static var tab_table_class) Make a global var.
6168
6169         * htmlP.h: New file.
6170
6171 Tue Feb  3 16:12:18 1998  Ben Pfaff  <blp@gnu.org>
6172
6173         * dump-sysfile.c: Removed.
6174
6175         * html.c: (preclose) Change comment in emitted code.
6176
6177         * matrix-data.c: Debugging off by default.  Comment fixes.
6178         (static var container) New var.
6179         (cmd_matrix_data) Create and destroy container.  Initialize
6180         is_per_factor[] to 0s.  Move code into new function
6181         string_to_content_type().  Require split values to be present in
6182         the data when ROWTYPE_ is explicit.  Call specific function, not
6183         general read_matrices().
6184         (string_to_content_type) New function.
6185         (context) Exclude all whitespace, not just spaces.
6186         (mget_token) A dot is a number.  Add assertion.
6187         (static var data) Renamed nr_data.
6188         (static var factor_values) Renamed nr_factor_values.
6189         (read_matrices) Renamed read_matrices_without_rowtype().  Handle
6190         only specific case.  Close data_file before exit.
6191         (fill_matrix) New function.
6192         (read_data_lines) Renamed nr_read_data_lines().  Remove debug
6193         printing.  Style fixes.  Message fixes.  Move code into
6194         fill_matrix().
6195         (read_matrices_without_rowtype) Rename
6196         matrix_data_read_without_rowtype().  Fix off-by-one error on
6197         loops.  Allocate nr_data[] memory from arena.
6198         (read_matrices_with_rowtype) Removed.
6199         (read_splits) Renamed nr_read_splits().  Style fixes.
6200         (read_factors) Renamed nr_read_factors().
6201         (dump_cell_content) Comment fixes.  Arguments changed.  Change
6202         debug printing.  All references changed.
6203         (output_data) Renamed nr_output_data().
6204         (static var wr_content) New var.
6205         (struct factor_data) New struct.
6206         (static var wr_data) New var.
6207         (static var wr_current) New var.
6208         (matrix_data_source_destroy_source) Removed.
6209         (read_matrices_with_rowtype) New function.
6210         (matrix_data_read_with_rowtype) New function.
6211         (wr_read_splits) New function.
6212         (compare_factors) New function.
6213         (wr_output_data) New function.
6214         (wr_read_rowtype) New function.
6215         (wr_read_factors) New function.
6216         (wr_read_indeps) New function.
6217         (glob var matrix_data_source) Make destroy_source member NULL as
6218         well.
6219
6220 Fri Jan 23 00:09:08 1998  Ben Pfaff  <blp@gnu.org>
6221
6222         * lexer.c: (syntax_error) Give better error message when at end of
6223         file.
6224
6225         * matrix-data.c: (var content_names[]) Fix PROX spelling.  Change
6226         N_SCALAR to output as plain N.
6227         (mdump_token) Change output format.
6228         (context) Fix message output interaction with spaces in input.
6229         (another_token) New function.
6230         (force_eol) Improved error message.
6231         (static var max_cell_index) New var.
6232         (read_matrices) Init `cells'.  factor_values is now per-cell.
6233         Init max_cell_index.
6234         (read_data_lines) Replace `compare' local with new `compare' arg.
6235         Debugging messages changed.  Only read factors if per_factor.
6236         Propagate error return from read_factors(), force_eol().
6237         Copy N_SCALAR values across the N vector.
6238         (read_matrices_without_rowtype) Don't init `cells'.  Don't need to
6239         check parentheses manually since we now have is_per_factor[].
6240         Call read_data_lines() with new args.  Check for end of data after
6241         looping, using another_token().
6242         (read_factors) Arguments changed.  Use max_cell_index to determine
6243         whether to read or compare factors.  Message fixes.
6244         (dump_cell_content) New function.
6245         (output_data) Completely rewritten because content types were
6246         supported to be nested inside factor values, not vice versa.
6247         
6248 Thu Jan 22 00:26:38 1998  Ben Pfaff  <blp@gnu.org>
6249
6250         * lexer.c: (syntax_error) Support formatted varargs messages.
6251
6252         * matrix-data.c: Turn debugging on by default.
6253         (static content_type[]) New array.
6254         (static content_names[]) New array.
6255         (static rowtype_, varname_) New vars.
6256         (static is_per_factor[]) New array.
6257         (static split_values) Moved declaration.
6258         (static n_continuous, first_continuous) New var.
6259         (cmd_matrix_data) Don't init split_values.  Assign ROWTYPE_ to
6260         rowtype_.  Simplify SPLIT code.  Init is_per_factor[].  Assign
6261         VARNAME_ to varname_.  Initialize first_continuous, n_continuous.
6262         Check for continuous variables.
6263         [DEBUGGING] (debug_print) Remove content_names[].
6264         (mdump_token) New macro.
6265         (mget_token_dump) New function.
6266         (mdump_token) New function.
6267         (context) New function.
6268         (mget_token) Fix messages.
6269         (static var data, split_values, factor_values) New vars.
6270         (read_matrices) Manage split_values, factor_values.
6271         (read_data_lines) New function.
6272         (read_matrices_without_rowtype) Implemented.
6273         (read_splits) Message fixes.  Uses `just_read'.
6274         (read_factors) New function.
6275         (output_data) New function.
6276         (matrix_data_source_destroy_source) Close the file handle.
6277         (glob var matrix_source) Change name from "DATA LIST" to "MATRIX
6278         DATA".
6279
6280         * str.c: (strpadcmp) Removed.
6281
6282         * vfm.c: (dump_splits) Initialize i; fix test for end of splits.
6283
6284 Sun Jan 18 00:30:59 1998  Ben Pfaff  <blp@gnu.org>
6285
6286         * Lots of source files: Add cast to unsigned character to calls to
6287         tolower() and toupper().
6288
6289         * aggregate.c: Set default_dict.splits to NULL.
6290
6291         * command.c: (static variable tab[]) Add MATRIX DATA.
6292
6293         * data-in.c: Add debugging defines.  Formatting fixes.
6294
6295         * expr-opt.c: Formatting fixes.
6296
6297         * lexer.c: (syntax_error) Message fixes.
6298
6299         * matrix-data.c: New enum series.
6300         (static vars fmt, section, diag, explicit_rowtype, signle_split,
6301         split_values, n_factors, factors, cells, pop_n, contents,
6302         n_contents) New vars.
6303         (cmd_matrix_data) Finished implementation.
6304         (compare_variables_by_mxd_vartype) New function.
6305         [DEBUGGING] (debug_print) New function.
6306         (static vars mtoken, mtokstr, mtoklen, mtokval) New vars.
6307         (read_matrices) New function.
6308         (read_matrices_without_rowtype) New function.
6309         (read_matrices_with_rowtype) New function.
6310         (read_splits) New function.
6311         (mget_token) New function.
6312         (force_eol) New function.
6313         [0] (test_tokenizer) New function.
6314         (matrix_data_source_destroy_source) New function.
6315         (glob var matrix_data_source) New var.
6316
6317         * misc.h: Include ieeefp.h if present.
6318
6319         * split-file.h: (cmd_split_file) Changes corresponding to struct
6320         dictionary changes.
6321
6322         * str.h: Fix memmem prototype.
6323
6324         * temporary.c: (save_dictionary, restore_dictionary,
6325         free_dictionary) Changes corresponding to struct dictionary
6326         changes.
6327
6328         * var.h: (MXD_* enums) New enum series.
6329         (struct matrix_data_proc) New struct.
6330         (struct split) Removed.
6331         (struct dictionary) Changed `splits' member from `split *' to
6332         `variable **'.
6333         (macro force_create_variable) New macro.  Replaced lots of
6334         create_variable()/assert() calls with calls to this macro.
6335
6336         * vars-atr.c: (discard_variables) Changed assertion.
6337         [GLOBAL_DEBUGGING] (force_create_variable) New function
6338         called by the macro of the same name.
6339         (clear_variable) Changes to delete splits from the dictionary
6340         corresponding to struct dictionary changes.
6341
6342         * vars-prs.c: (parse_variables) [GLOBAL_DEBUGGING] Check for
6343         corrupted variable `index' values in the dictionary passed in
6344         every time this function is called.
6345
6346         * vfm.c: (dump_splits, SPLIT_FILE_procfunc) Changes corresponding
6347         to struct dictionary changes.
6348
6349 Tue Jan 13 23:45:02 1998  Ben Pfaff  <blp@gnu.org>
6350
6351         * Makefile.am: (pspp_SOURCES) Add matrix-data.c.
6352
6353         * command.c: New includes.
6354         (static array cmd_table[]) Add ERASE, HOST, NEW FILE.
6355         (cmd_erase) New function.
6356         [unix] (shell) New function.
6357         (run_command) New function.
6358         (cmd_host) New function.
6359         (cmd_new_file) New function.
6360
6361         * expr-prs.c: (parse_primary) Message fix.
6362
6363         * inpt-pgm.c: Formatting fix.
6364         (cmd_reread) Implement the FILE subcommand.
6365
6366         * matrix-data.c: New file.
6367
6368         * q2c.c: (dump_header) Change output commenting style.
6369
6370         * weight.c: Comment fix.
6371
6372 Tue Jan 13 00:53:39 1998  Ben Pfaff  <blp@gnu.org>
6373
6374         * aggregate.c: (buf64_10x) Renamed buf64_1xx, all references
6375         changed.
6376         (buf_10x) Renamed buf_1xx, all references changed.
6377         (cmd_aggregate) Implemented cases 010, 011, 110, and 111 (all
6378         cases now implemented).
6379         (create_sysfile) New function.
6380         (agr_11x_func) New function.
6381
6382         * data-in.c: (parse_numeric) Work properly if there's an
6383         explicitly coded decimal point in the data and decimal places are
6384         specified on DATA LIST.  Bug reported by Dr Eberhard W Lisse
6385         <el@linux.lisse.na>.
6386
6387         * get.c: (cmd_get, cmd_save_internal) Allow extraneous slash
6388         before file specification on GET, SAVE, XSAVE.  Bug reported by Dr
6389         Eberhard W Lisse <el@linux.lisse.na>.
6390
6391         * q2c.c: [!HAVE_STRERROR] Include misc/strerror.c, not
6392         strerror.c.  Bug reported by Alexandre Oliva
6393         <oliva@dcc.unicamp.br>.
6394
6395         * sort.c: Include sort.h.  Comment fixes.  A few esthetic fixes.
6396         (static var separate_case_tab) New var.
6397         (cmd_sort_cases) Cancel temporary transformations here.  Free
6398         v_sort before return.
6399         (sort_cases) Run an EXECUTE procedure if SEPARATE is nonzero and
6400         we're reading from a sort stream.  Don't cancel temporary
6401         transformations.  Offload internal sorting to do_internal_sort().
6402         (do_internal_sort) New function.  Handles internal sorting even
6403         when SEPARATE is nonzero.  Doesn't free v_sort.
6404         (do_external_sort) Take new arg SEPARATE.  Only destroy `x' if
6405         it's non-NULL.
6406         (write_initial_runs) Take new arg SEPARATE.  Only destroy the old
6407         sink if SEPARATE is zero.
6408         (read_output_cases) Renamed read_sort_output(), all references
6409         changed.  Now uses separate_case_tab when it exists.
6410         (write_separate) New function.
6411
6412         * vfm.c: (page_to_disk) Destroy memory_source_cases, not
6413         memory_sink_cases.  Don't redundantly call
6414         vfm_source->destroy_source().
6415         (memory_stream_mode) After switching over, set memory_sink_cases
6416         to NULL.
6417
6418 Sat Jan 10 23:35:51 1998  Ben Pfaff  <blp@gnu.org>
6419
6420         * aggregate.c: (struct agr_var) Expand dbl[] array from 2 to 3
6421         elements.
6422         (static var prev_case) New, moved out of aggregate_single_case()
6423         local scope.
6424         (static var buf64_10x, buf_10x) New.
6425         (cmd_aggregate) Initialize prev_case.  Comment fixes.  Implement
6426         the 000, 001, 100, and 101 cases.  Free prev_case.
6427         (parse_aggregate_functions) Disallow scratch variables.
6428         (free_aggregate_functions) Only free agr_dict if non-null.  Use
6429         iter->function to determine numeric/string type, not
6430         iter->src->type.
6431         (aggregate_single_case) Don't manage prev_case.  Initialize
6432         aggregate info after dumping it.
6433         (accumulate_aggregate_info) Fix sum, weighted sum, mean, weighted
6434         mean, stddev, weighted stddev definitions.
6435         (dump_aggregate_info) Implemented.
6436         (initialize_aggregate_info) Renamed from
6437         initialize_aggregate_functions().  Initializes dbl[2].
6438         (agr_00x_trns_proc, agr_00x_end_func, write_case_to_sfm,
6439         agr_10x_trns_proc, agr_10x_trns_free, agr_10x_end_func) New.
6440
6441         * cases.c: (alloc_val) Removed.
6442
6443         * get.c: (cmd_save_internal) Initialize new `dict' member.
6444
6445         * sfm-write.c: (sfm_write_dictionary, write_header,
6446         write_variable, write_value_labels, write_documents) Reorganize,
6447         simplify for new parameter structure.
6448         (write_variable) Only one variable * argument now.
6449
6450         * sfm.h: (struct sfm_write_info) Removed `pri', `sec', and
6451         replaced by new `dict' member.
6452
6453         * temporary.c: (new_dictionary) Initialize n_documents.
6454
6455         * vars-atr.c: (dup_variable) Allocate `value's from dict into
6456         v->fv manually.
6457         (init_variable, replace_variable) Eliminate usage of alloc_val().
6458
6459         * vars-prs.c: (parse_DATA_LIST_vars) Accept PV_NO_SCRATCH option.
6460
6461         * vfm.c: (arrange_compaction) Allow `temporary' value of 2 to
6462         signal that AGGREGATE is to be used for forming final cases.
6463         (close_active_file) Call end_func before stopping lagging.  Cancel
6464         temporary after finishing compaction.
6465         (write_case) Comment fixes.  Cleaned up.
6466         (compact_case) Let AGGREGATE handle compaction when `temporary' is
6467         2.
6468
6469 Sat Jan 10 02:10:47 1998  Ben Pfaff  <blp@gnu.org>
6470
6471         * Makefile.am: (BUILT_SOURCES) Add means.c.
6472         (pspp_SOURCES) Add means.c.
6473         (EXTRA_DIST) Add means.q.
6474
6475         * command.c: (array cmd_table[]) Add MEANS.
6476
6477         * common.h: Esthetic fixes.  Comment fixes.  Test for
6478         MAX_SHORT_STRING greater than 8.
6479         (macros LOWEST, HIGHEST) New.
6480
6481         * data-in.c, data-list.c, recode.c: Comment fixes.
6482
6483         * means.q: New file, base version.
6484
6485         * mis-val.c: (parse_num_or_range, parse_numeric) Replace -DBL_MAX
6486         with LOWEST, DBL_MAX with HIGHEST.
6487
6488         * q2c.c: (dump_vars) Add an enum to array types giving the number
6489         of values for the enum.
6490
6491         * sfm-read.c: (sfm_read_dictionary, read_machine_flt64_info)
6492         Replace second_lowest_value with second_lowest_flt64.
6493
6494         * sfm-write.c: (write_variable, write_rec_7_34) Replace
6495         second_lowest_value with second_lowest_flt64.
6496
6497         * t-test.q: Comment fix.
6498
6499         * temporary.c: (restore_dictionary) Esthetic fix.
6500
6501         * tokens.h: (force_match_id, force_match, force_string, force_int,
6502         force_num, force_id) Replace msg() with syntax_error().
6503
6504         * var.h: (struct means_proc) New.
6505         (struct variable) Add mns member to `p' union.
6506
6507         * vars-prs.c: (parse_variable, parse_dict_variable,
6508         parse_variables, parse_DATA_LIST_vars) Replace msg() with
6509         syntax_error().
6510
6511 Thu Jan  8 22:28:41 1998  Ben Pfaff  <blp@gnu.org>
6512
6513         * Makefile.am: (pspp_SOURCES) Add tab.h.
6514
6515         * Most source files: Added a cast to unsigned char in usages of
6516         the ctype is*() functions.  Replaced `end of command expected'
6517         calls to msg() with calls to syntax_error().
6518
6519         * frequencies.q: (dump_condensed) Fix tab_dim() column reference.
6520
6521         * lexer.c: (hex_val) Removed (was dead code).
6522         (idmatch) Parenthesize function name to avoid macro expansion.
6523
6524         * postscript.c: Comment fixes.
6525         (ps_preopen_driver) Change default font size to 10pt.
6526
6527         * sfm-read.c: (read_variables) Byteswap sv.print, sv.write as
6528         int32s.
6529         (parse_format_spec) Change system-file format spec argument type
6530         to int32.  Parse the format spec with bitwise operators.
6531
6532         * sfmP.h: (struct sysfile_format) Removed.
6533         (struct sysfile_variable) Changed print, write members from
6534         sysfile_format to int32.
6535
6536         * tokens.h: Esthetic fixes.
6537         [__GNUC__] (macro id_match) New macro to hopefully speed up
6538         identifier matching.
6539         (macros match_id, match_tok, match_int) Implemented in
6540         compiler-independent manner; no longer GNU C only.
6541
6542         * vfm.h: Include time.h.
6543
6544 Mon Jan  5 11:06:15 1998  Ben Pfaff  <blp@gnu.org>
6545
6546         * data-list.c: (dump_fixed_table) Change tab_dim().
6547
6548         * dump-sysfile.c: (open_sysfile) Fix mmap() call.
6549
6550         * error.c: Include command.h.
6551
6552         * frequencies.g: Formatting fixes.
6553
6554         * frequencies.q: Add tab_dim() calls.  Make the total cell a
6555         joined cell.
6556
6557         * glob.c: Include command.h.
6558
6559         * sfm-read.c: (struct sfm_fhuser_ext) New members sysmis, highest,
6560         lowest.
6561         (sfm_read_dictionary) Initialize sysmis, highest, lowest.
6562         (sfm_read_machine_flt64_info) Update sysmis, highest, lowest.
6563         (read_variables) Byteswap sv.type; byteswap sv.print, sv.write as
6564         the other elements (is this right?).
6565         (read_variables) Use lowest, highest members.
6566         (parse_format_spec) New arg `vv' for more stringent checking.
6567         (dump_dictionary) Byteswaps nonexplicit data.
6568         (sfm_read_case) Byteswap numeric data.
6569
6570         * som.c: Initialize table_num to 1.
6571         (render_segments) Remember to increment y_index after each table
6572         segment.
6573
6574         * sysfile-info.c: (cmd_sysfile_info) Change tab_dim().  Don't call
6575         avl_count() on a NULL tree.  No title for the second table.
6576         (cmd_display) Handle DISPLAY VECTORS by calling display_vectors().
6577         Handle AS_SCRATCH as AS_NAMES.  Warn if no variables.  Re-enable;
6578         fix call to display_variables().
6579         (display_variables) Default to 4 columns, not 3.  Set up headers.
6580         Column title is Variable, not Name.  Fix index column.
6581         Add joint text.  Add tab_dim().  Handle value labels properly.
6582         Handle DISPLAY LABELS properly.  Draw boxes correctly.
6583         (describe_variable) Value labels don't need titles.  Don't clear
6584         nonexistent index column.
6585         (compare_vectors_by_name) New function.
6586         (display_vectors) New function.
6587
6588         * tab.c: (tab_height) Add assertion.
6589         (tab_null) Add debug code.
6590         (evaluate_dimensions) Add debug code.
6591
6592         * var.h: (struct variable) get_proc data is sometimes used
6593         simultaneously with other per-procedure info, therefore it was
6594         removed from the union.  All references changed.        
6595
6596 Sun Jan  4 18:13:33 1998  Ben Pfaff  <blp@gnu.org>
6597
6598         * ascii.c: (ascii_close_page) Put title on second line of headers
6599         if there is no subtitle.
6600
6601         * command.c: (glob var cur_proc) Move definition here, from
6602         common.c.
6603         (cmd_remark) Emit blank line before remarks.
6604
6605         * command.h: (glob var cur_proc) Move declaration here, from
6606         common.h.
6607
6608         * data-list.c: (dump_fixed_table) Fix messages.
6609         (dump_free_table) Call tab_nat_dim().
6610
6611         * descript.q: (dump_z_table) Modify tab_dim() call.
6612
6613         * frequencies.q: (dump_condensed, dump_statistics) Add tab_dim()
6614         call.
6615         (dump_statistics) Don't output header.
6616
6617         * groff-font.c: Minor format fix.
6618
6619         * html.c: Comment fix.
6620
6621         * list.q: (write_varname) Indent after advancing page.
6622
6623         * output.h: Minor reordering.
6624
6625         * postscript.c: Comment fixes.  Many places, '\n' was replaced by
6626         a reference to eol[].
6627         (struct ps_driver_ext) New member eol[].
6628         (ps_preopen_driver) Initialize eol[].
6629         (ps_postopen_driver) Fix sense of text for text_opt, line_opt
6630         defaults.  Handle headers.  Fix test for minimum page length.
6631         (static var option_tab[]) Add `line-ends'.
6632         (ps_option) Handle line-ends to change eol[].
6633         (postopen) Scale prop_em_width and fixed_width properly.  Set the
6634         prologue title to outp_title if applicable.  Replace the prologue
6635         line ends with eol[].  Call draw_headers() if headers are enabled.
6636         (text_width) New function.
6637         (out_text_plain) New function.
6638         (draw_headers) New function.
6639
6640         * print.c: (dump_table) Call tab_nat_dim().
6641
6642         * som.c: (som_blank_line) Only advance a line if not at the top of
6643         a page.
6644         (som_submit) Move several informational table calls here.
6645         Increment subtable_num if SOMF_NO_TITLE not set.
6646         (output_table) Advance a line if SOMF_NO_SPACING not set.
6647         (render_columns, render_segments, render_simple) Handle spacing
6648         between tables.  Handle table titles.  Remove debug output.
6649
6650         * som.h: (SOMF_*) New enum series.
6651         (struct som_table_class) New member `flags'.
6652
6653         * sysfile-info.c: (cmd_sysfile_info) Calls tab_nat_dim().  No
6654         headers or spacing.
6655         (display_variables) Calls tab_nat_dim().
6656         (describe_variable) Remove restriction on number of value labels.
6657         Make value labels separated by thin lines.
6658
6659         * tab.c: (tab_create) Default `flags' to none.
6660         (tab_float) New arg `w'.  All references changed.
6661         (tab_nat_dim) New function.
6662         (tab_output_text) No title or spacing.
6663         (tab_flags) New function.
6664         (tabi_flags) New function.
6665         (tabi_title) New function.
6666         (strip_height) Removed.
6667         (tabi_render) Skip title when necessary.
6668         (static var tab_tab_class) Add tabi_flags, tabi_title.
6669         (evaluate_dimensions) Disable display of column, row size.
6670         (sum_columns) Add title height to top header.
6671         (render_strip) Moved within file.
6672
6673         * tab.h: (struct tab_table) New member `flags'.
6674
6675         * vfm.c: (dump_splits) Calls tab_nat_dim().  No title.
6676
6677 Sat Jan  3 16:55:44 1998  Ben Pfaff  <blp@gnu.org>
6678
6679         * Most source files: Add `const' attribute in all appropriate
6680         places.
6681         
6682         * sysfile-info.c: (cmd_sysfile_info) Add tab_dim() call, add a
6683         column to the variables table for use by describe_variable().
6684         (cmd_display) Disable for the present.
6685         (display_documents) Don't wrap documents.
6686         (display_variables) Table has four columns now.
6687         (describe_variable) Table has four columns now.  Don't use a
6688         subtable, use joined cells instead.
6689
6690         * tab.c: (tab_create) Don't set `join'.
6691         (tab_realloc) ct array is not made up of a_string's.
6692         Reallocate trh, hrh, h arrays, initialize trh array.  Initialize
6693         cell contents on GLOBAL_DEBUGGING, not DEBUGGING.
6694         (text_format) New function.
6695         (tab_title) Rewritten, uses text_format().
6696         (tab_text) Rewritten, uses text_format().
6697         (tab_joint_text) New function.
6698         (tab_join) Removed.
6699         (static var hit) New variable.
6700         (render_strip) New args r1, r2.  Implement joined cells that fit
6701         on a single page.
6702         (tabi_render) Increment hit.  Pass new args to render_strip().
6703         (evaluate_dimensions) [GLOBAL_DEBUGGING] Check for uninitialized
6704         cells.  For t_naw and t_nah, ignore joined cells and null cells in
6705         calculations.
6706         
6707         * tab.h: (struct tab_join_rect) Removed.
6708         (struct tab_table) Removed `join'.
6709         (TAB_JOIN_MAIN) Removed.
6710         (struct tab_joined_cell) New struct.
6711         (TAT_NOWRAP) New enum.
6712
6713 Fri Jan  2 01:39:58 1998  Ben Pfaff  <blp@gnu.org>
6714
6715         * ascii.c: (ascii_postopen) Replace ASCII_* macros with their
6716         expansions.
6717         (ascii_postopen_driver) Fix initialization of *_spacing so that
6718         the TAL_0 bit doesn't count.
6719
6720         * data-list.c: (dump_fixed_table) Use natural width for Format
6721         column.
6722
6723         * glob.c: (rerange) Removed.
6724         (get_date) Formatting fixes.  Internationalization fix.
6725
6726         * html.c: (html_postopen_driver) Replace HTML_DEFAULT_OUTPUT_FILE
6727         with "pspp.html".
6728
6729         * postscript.c: (ps_postopen_driver) Replace
6730         PS_DEFAULT_OUTPUT_FILE with "pspp.ps".
6731
6732         * som.c: (som_submit) Don't eject page before every table.
6733         (output_table) Fix order of arguments on call to area().
6734         (render_columns) Fix calculation of max_len.
6735         
6736         * tab.c: (tabi_cumulate) Minor change to increase elegance.
6737         (render_strip) New function.
6738         (strip_height) New function.
6739         (tabi_render) Rewrite as calls to render_strip().
6740
6741         * tab.h: (TAT_* enums) Removed TAT_RICH, all references removed.
6742         Renumbered TAT_PRINTF, TAT_TITLE, TAT_FIX to correspond better
6743         with the TAB_* and OUTP_T_* constants.
6744         
6745 Thu Jan  1 11:53:52 1998  Ben Pfaff  <blp@gnu.org>
6746
6747         * Makefile.am: Formatting fixes.
6748
6749         * ascii.c: (ascii_postopen_driver) Initialize *_line_spacing[],
6750         *_line_width[].
6751
6752         * data-list.c: (dump_fixed_table) Add tab_dim() call.
6753
6754         * descript.q: (dump_z_table, display) Add tab_dim() calls.
6755
6756         * dump-sysfile.c: (glob var length) Make type off_t.
6757         (usage) Fix arguments.
6758         (main) Return 0.
6759
6760         * output.h: (OUTP_T_*) Change constants' value to match tab.h.
6761         Now right-justification is the default so many references had to
6762         change.
6763         (struct outp_class) Removed line_width, all references changed.
6764         (OUTP_DEV_*) Add OUTP_DEV_DISABLED.
6765         (struct outp_driver) Add elements horiz_line_width,
6766         vert_line_width, horiz_line_spacing, vert_line_spacing.  Remove
6767         som element.
6768
6769         * postscript.c: (outp_encodings) Formatting fixes.  Fix garbage
6770         collection.
6771         (postopen) Initialize all the informational members of
6772         outp_driver.
6773
6774         * som.c: (som_blank_line) New function, renamed from blank_line(),
6775         all references changed.
6776         (som_submit) Disables drivers whose pages can't be opened.
6777         (render_columns, render_simple, render_segments) Add debug output.
6778         (render_columns) Fix loop range.
6779         (render_simple) Don't try to render the headers, they're taken
6780         care of automatically.  Advance cp_y past the table when done.
6781         (render_segments) Fix loop ranges.
6782
6783         * tab.c: Initialize new members of tab_table.
6784         (tab_vline) Handle trv[]; don't set style for spacing-only lines.
6785         (tab_hline) Handle trh[]; don't set style for spacing-only lines.
6786         (tab_box) Handle trh[], trv[]; don't set style for spacing-only
6787         lines.
6788         (set_expr) Removed.
6789         (tab_dim) New function.
6790         (tab_col_width) Removed.
6791         (tab_row_height) Removed.
6792         (tab_output_text) Call tab_dim().
6793         (tabi_driver) Call evaluate_dimensions(), sum_columns().
6794         (tabi_area) Implemented.
6795         (tabi_cumulate) Implemented.
6796         (tabi_render) Partially implemented, but broken.
6797         (var tab_table_class) Made static.
6798         (evaluate_dimensions) New function.
6799         (sum_columns) New function.
6800
6801         * tab.h: (enum t_*) Now start at t_end.  New: t_ptw, t_nr, t_nc,
6802         t_nah, t_naw, t_neg, t_xch, t_dup, t_lbl, t_jnz, t_sac, t_sar,
6803         t_scr, t_srr, t_sentinel.  Removed: t_nat.
6804         (struct tab_table) New: wl, wr, ht, hb, trh, hrh, trv, wrv, dim,
6805         max_stack_height, w, h.  Removed: ce, re.
6806         (macro blank_line) Removed.
6807         (glob var zero_length) Removed.
6808
6809 Fri Dec 26 15:44:31 1997  Ben Pfaff  <blp@gnu.org>
6810
6811         * Most source files: include some of the new include files broken
6812         out of var.h.
6813         
6814         * Makefile.am: (pspp_SOURCES) Add all the new source files to the
6815         list.
6816
6817         * aggregate.c: (glob var outfile) Make static.
6818
6819         * command.c: (glob var pgm_state) Move here.
6820
6821         * common.c: (glob vars endian, second_lowest_value, pgmname,
6822         finished, curdate, cur_proc, start_interactive, history_file) Move
6823         here.
6824
6825         * descript.q: (structs dsc_z_score, descriptives_trns) Move here.
6826
6827         * file-handle.q: (glob vars files, inline_file) Move here.
6828
6829         * glob.c: Lost lots of glob vars, detailed in individual file
6830         entries.
6831         (init_glob) set_printer, set_screen were obsolete, deleted.
6832         set_cprompt has fewer spaces because pspp has fewer letters than
6833         fiasco.
6834
6835         * inpt-pgm.c: (glob vars inp_init, inp_init_size) Move here.
6836         (inp_nval) Made static.
6837
6838         * lexer.c: (glob vars token, tokval, tokstr, tokstr_size,
6839         tokstr_len, toklongstr, tokint) Move here.
6840
6841         * misc.c: Lost several vars and functions.
6842
6843         * set.q: (all the set_* variables) Move here.
6844
6845         * str.c: (strmaxcpy, strbarepadcpy, strbarepadlencpy, strpadcpy,
6846         blpstrset, strpadcmp, memrev, memrmem, cmp_str) Move here from
6847         misc.c.
6848
6849         * tab.c: (set_expr, tab_col_width, tab_row_height) New functions.
6850
6851         * tab.h: (enum series t_*) New enums.
6852         (struct tab_table) Use arena struct tag.  New members ce, re.
6853
6854         * tokens.h: Comment fixes.
6855
6856         * var.h: Move lots of enums and variables and functions and
6857         structures to other files.  Use and declare a lot more union and
6858         struct tags.  Comment fixes.  
6859
6860         * vector.c: (glob vars vec, nvec) Move here.
6861
6862         * vfm.c: (glob vars reinit_sysmis, reinit_blanks, init_zero,
6863         init_blanks, last_vfm_invocation) Move here.
6864
6865         * cases.h: New file.
6866         (struct long_vec) Move here.
6867         (vec_init, vec_clear, vec_insert, vec_delete, devector, envector)
6868         Move here.
6869
6870         * command.h: New file.
6871         (STATE_* enums) Move here.
6872         (glob var pgm_state) Move here.
6873
6874         * format.c: New file.
6875         (glob var formats) Move here.
6876         (parse_format_specifier_name, fmt_to_string,
6877         check_input_specifier, check_output_specifier,
6878         check_string_specifier, convert_fmt_ItoO, parse_format_specifier)
6879         Move here.
6880
6881         * format.h: New file.  Move functions now in format.c here.
6882         (FMT_* enums) Move here.
6883         (struct fmt_desc) Move here.
6884         (FCAT_* enums) Move here.
6885         (struct fmt_spec) Move here.
6886         (glob vars formats, fmt_parse_ignore_error) Move here.
6887
6888         * inpt-pgm.h: New file.
6889         (INP_* enums) Move here, make #defines into enums.
6890         (glob vars inp_init, inp_init_size) Move here.
6891
6892         * sort.h: New file.
6893         (glob vars v_sort, nv_sort) Move here.
6894         (sort_cases, read_sort_output) Move here.
6895
6896         * vector.h: New file.
6897         (struct vector) Move here, add struct tag.
6898         (glob vars vec, nvec) Move here.
6899         (find_vector) Move here.
6900
6901         * New file.
6902         (glob vars last_vfm_invocation, temp_case, reinit_sysmis,
6903         reinit_blanks, init_zero, init_blanks) Move here.
6904         (struct case_stream) Move here.
6905         (glob vars vfm_source, vfm_sink, vfm_memory_stream,
6906         vfm_disk_stream, sort_stream, data_list_source,
6907         input_program_source, file_type_source, get_source, n_lag) Move
6908         here.
6909         (procedure, write_case, lagged_case, compact_case, page_to_disk)
6910         Move here.
6911                 
6912 Wed Dec 24 22:40:42 1997  Ben Pfaff  <blp@gnu.org>
6913
6914         * Makefile.am: (pspp_SOURCES) Added html.c, som.c, som.h.
6915         (LDADD) Add libdcdflib.
6916
6917         * ascii.c: Comment and formatting fixes.  Almost every external
6918         function had an assert added, checking driver_open and page_open.
6919         (ascii_init_driver) Broken into ascii_preopen_driver,
6920         ascii_postopen_driver, ascii_close_driver.  Manages driver_open.
6921         (ascii_open_page) Sets page_open.
6922         (ascii_close_page) Clears page_open.
6923
6924         * html.c: Comment and formatting fixes.  Almost every external
6925         function had an assert added, checking driver_open and page_open.
6926         (html_init_driver) Broken into html_preopen_driver,
6927         html_postopen_driver, html_close_driver.  Manages driver_open.
6928         (html_open_page) Sets page_open.
6929         (html_close_page) Clears page_open.
6930         (html_submit) Disabled.
6931
6932         * lexer.c: (parse_string) Remove debugging printf.
6933
6934         * list.q: (determine_layout) Open a page if one is not yet open.
6935
6936         * output.c: Comment fixes.
6937         (add_class) Set the class member of the new list element.
6938         (parse_options) Don't handle device type.
6939         (colon_tokenize) New function.
6940         (configure_driver) New four-field format with a field for device
6941         type.  Now initialize driver_open, page_open, next, and prev
6942         fields.  Use new colon_tokenize() function.  Don't do a memory
6943         copy to replace a driver, it doesn't work; instead delete the old
6944         driver and insert a new one.
6945         (destroy_driver) Don't call som_destroy_driver().  Close the page
6946         if it's open.  Find the class in the list of classes and decrement
6947         that reference count.  Remove the driver from the global driver
6948         list.
6949         (outp_iterate_enabled_drivers) Renamed outp_drivers().  All
6950         references changed.  Rewritten.  Don't return a driver that's not
6951         enabled.
6952         (outp_eject_page) All references to som_internal_eject_page()
6953         changed to use this.  Sets cp_x to 0 as well as cp_y.
6954
6955         * output.h: (OUTP_I_* enums) Removed.
6956         (struct som_submission_form) Removed.
6957         (struct outp_class) init_driver broken into preopen_driver,
6958         postopen_driver, and close_driver.  submit changed to take a
6959         som_table argument.
6960
6961         * postscript.c: Comment and formatting fixes.  Almost every
6962         external function had an assert added, checking driver_open and
6963         page_open.
6964         (ps_init_driver) Broken into ps_preopen_driver,
6965         ps_postopen_driver, ps_close_driver.  Manages driver_open.
6966         (ps_open_page) Sets page_open.
6967         (ps_close_page) Clears page_open.
6968
6969         * som.c: New file, base implementation.
6970         
6971         * som.h: (struct som_table) Add struct tag.
6972         (enum SOM_COL_ACROSS) Removed.
6973         (SOM_ROWS, SOM_COLUMNS) New enums.
6974         (struct som_table_class) Add member `cumulate'.  Remove `segment';
6975         change `render' arguments.
6976         (struct som_point, struct som_rect) Removed.
6977         (som_submit_table) Fixed typo, should have been som_submit.
6978
6979         * sysfile-info: (describe_variable) Don't try to insert a
6980         subtable; just destroy it for now.
6981
6982         * t-test.q: Include dcdflib/cdflib.h instead of cdflib.h.  Fix
6983         references to value labels.
6984
6985         * tab.c: (tab_destroy) New function.
6986         (tab_columns) Change argument.
6987         [0] (tab_submit) Remove dead code.
6988         (tab_title) Allocate string from the table's arena.
6989         (tab_output_text) Only free the buffer if we allocated it.
6990         (tab_submit) New function.
6991         (static vars t, d) New static vars.
6992         (tabi_table, tabi_driver, tabi_count, tabi_area, tabi_columns,
6993         tabi_headers, tabi_cumulate, tabi_render) New functions.
6994         (glob var tab_table_class) New global var.
6995
6996         * tab.h: (struct tab_join_rect) Don't use a som_rect; directly
6997         encapsulate the rectangle.  All references changed.
6998         
6999 Sun Dec 21 16:18:58 1997  Ben Pfaff  <blp@gnu.org>
7000
7001         * All header files updated to use struct tags in addition to
7002         typedefs for all structures.  Don't use word `struct' in struct
7003         tags.
7004         
7005         * Makefile.am: (pspp_SOURCES) Remove html.c.
7006         (INCLUDES) Replace the lib/* includes with a single lib/ include;
7007         all references updated.
7008
7009         * command.c: (parse_cmd) Remove call to som_check_workspace.
7010         (output_line) Update to new som.
7011
7012         * data-in.c: (parse_numeric) A single dot is not an error; it is
7013         the system-missing value.
7014
7015         * data-list.c: (dump_fixed_table, dump_free_table) Update to new
7016         som.
7017
7018         * data-out.c: Added `const' as appropriate to many prototypes.
7019         (convert_E, convert_F, convert_CCx) Take double argument instead
7020         of value * argument.
7021         (convert_format_to_string) Call changed functions appropriately.
7022         Instead of modifying the caller's value for FCAT_SHIFT_DECIMAL,
7023         make a local copy of the value.
7024
7025         * descript.q: Remove custom_variables() prototype now provided by
7026         q2c.  
7027         (custom_variables) Don't increment sbc_variables, the caller does
7028         this.
7029         (dump_z_table, display) Update to new som.
7030
7031         * error.c: (vmsg) Add const to prototype.  Remove code to handle
7032         `too many errors' condition.
7033         (check_error_count) New function.
7034         (msg) Add const to prototype.
7035
7036         * filename.c: (open_file) Rewrite for elegance.
7037
7038         * frequencies.q: Remove custom_*() prototypes now provided by q2c.
7039         (dump_full, dump_condensed, dump_statistics) Update for new som.
7040
7041         * list.q: Don't include somP.h.  Change all references to
7042         som_driver_ext to refer to the new members of som_driver.  Change
7043         som_internal_eject_page() references to outp_eject_page().
7044
7045         * main.c: (parse) Rewrite for elegance.  Add call to
7046         check_error_count().
7047
7048         * output.c: (add_class, outp_list_classes, outp_configure_driver)
7049         Rewrite or revise for new outp_driver_class_list structure.
7050         (outp_iterate_enabled_drivers) Fix comparison between disabled
7051         devices and current device type.
7052         (outp_eject_page) New function.
7053
7054         * output.h: Comment fixes.
7055         (struct outp_driver) New members driver_open, page_open, cp_x,
7056         cp_y, font_height, prop_em_width, fixed_width.  Deleted members
7057         ref_count, next.
7058         (struct outp_driver_class_list) New struct.
7059         (outp_class_list) Changed to type outp_driver_class_list; all
7060         references updated.
7061
7062         * print.c: (dump_table, print_trns_proc) Updated for new som.
7063
7064         * q2c.c: (dump_vars) Simplify array subcommand code.  Declare
7065         prototypes for custom subcommands.
7066         (dump_subcommand) Always include the `else'.
7067         (dump_parser) Fix comments in output code.
7068
7069         * set.q: Reordered functions.
7070
7071         * som-frnt.c, som-high.c, som-low.c, somP.h: Removed.
7072         
7073         * som.h: Rewritten from scratch.
7074
7075         * str.h: Remove dead code.
7076
7077         * tab.c, tab.h: New files, base implementation.
7078
7079         * sysfile-info.c: (cmd_sysfile_info, describe_variable) Update to
7080         new som.
7081
7082         * t-test.q: New code from John Williams
7083         <johnr.williams@stonebow.otago.ac.nz>.  Include math.h, cdflib.h.
7084         Many many new static vars and defines.
7085         (precalc, postcalc, g_postcalc, z_postcalc, t_pairs, t_groups,
7086         groups_calc, pairs_calc, z_dev_calc, z_calc) New functions.
7087         (struct value_list) New struct.
7088         (variance, covariance, pooled_variance, oneway, pearson_r, f_sig,
7089         t_crt, t_sig, print_t_groups) New functions.
7090         (cmd_t_test) Implemented.
7091
7092         * temporary.c: (cancel_temporary) Only free the temp_dict if it's
7093         non-NULL.
7094
7095         * vfm.c: (dump_splits) Update to new som.
7096
7097 Thu Dec  4 23:02:22 1997  Ben Pfaff  <blp@gnu.org>
7098
7099         * Makefile.am: (fiasco_SOURCES) Add html.c.
7100
7101         * aggregate.c: Base source.
7102
7103         * ascii.c: (postopen, preclose) Reformat.
7104
7105         * data-out.c, expr-evl.c: Comment fixes.
7106         
7107         * filename.c: (open_file) When opening a file for writing, use
7108         line buffering instead of full buffering for better interactive
7109         performance.  Suggested by Valerio Aimale
7110         <valerio@svpop.com.dist.unige.it>.  Also, recognize special file
7111         names `stdin', `stdout', `stderr'.
7112
7113         * groff-font.c: Comment fixes.
7114
7115         * html.c: New file; base version.
7116
7117         * list.q: (write_all_headers, clean_up, determine_layout,
7118         list_cases) Ignore `special' devices for now.  Needs to be fixed
7119         later.
7120
7121         * output.c: (outp_init) Add html driver to list; reverse list
7122         order.
7123
7124         * output.h: (struct outp_class_struct) New members `special',
7125         `submit'; comment fixes.  All references changed.
7126
7127         * postscript.c: (ps_init_driver) Make defaults for text_opt,
7128         line_opt depend on whether the OUTP_DEV_SCREEN bit is set on the
7129         device.
7130         (postopen) Comment fix.
7131         (preclose) Comment fixes, formatting fixes.  Change x->file.file
7132         references to more proper f->file.
7133
7134         * som-high.c: (som_submit_table) Special classes use their own
7135         renderers.
7136
7137         * som.h: Comment fixes.
7138
7139         * temporary.c: (new_dictionary) Don't try to xstrdup() a NULL
7140         string.
7141         
7142 Tue Dec  2 14:36:07 1997  Ben Pfaff  <blp@gnu.org>
7143
7144         * Makefile.am: (fiasco_SOURCES) Add aggregate.c back in.
7145
7146         * aggregate.c: Still working on this.
7147
7148         * command.c: (cmd_table[]) Add AGGREGATE back in.
7149         (split_words) Make '-' a legal word separator as well as ' '.
7150
7151         * main.c: Comment fixes.
7152
7153         * q2c.c: (dump_parser) Don't require the procedure's full name to
7154         be present, in the generated source.
7155
7156         * t-test.q: Change name to `t-test' from `t test'.  Let PAIRS be
7157         multiply specified and let it be default; let MISSING, CRITERIA,
7158         FORMAT be multiply specified.
7159         (cmd_t_test) Parse command name.  [DEBUGGING] Call debug_print().
7160         (custom_groups) Fix defaults.
7161         (custom_pairs) Check whether this is a PAIRS subcommand before
7162         attempting to parse.  Better garbage collection.  Proper storage
7163         allocation.
7164         [DEBUGGING] (debug_print) New function.
7165
7166         * temporary.c: Comment fixes.
7167         (copy_variable) Don't copy variable name and index.
7168         (save_dictionary) Copy variable name and index by hand.
7169
7170         * vars-atr.c: Comment fixes.
7171         (create_variable) New dictionary argument.  All references
7172         changed.
7173         (common_init_stuff) New dictionary argument.  All references
7174         changed.
7175         (init_variable) New dictionary argument.  All references changed.
7176         (dup_variable) New function.
7177
7178         * vars-prs.c: (parse_variables) If there are any errors, we always
7179         return 0.  Previously, it was possible for some types of errors to
7180         be ignored.
7181         
7182 Sat Nov 22 01:20:59 1997  Ben Pfaff  <blp@gnu.org>
7183
7184         * Makefile.am: (fiasco_SOURCES) For 0.1.5 release, remove
7185         aggregate.c.
7186
7187         * command.c: (cmd_table[]) Comment out AGGREGATE; add T TEST.
7188
7189         * list.q, t-test.q: Remove ALL option from VARLIST declaration in
7190         grammar rules.
7191
7192         * q2c.c: Comment fixes.
7193         (SBC_* enums) Remove SBC_VARLIST_ALL; all references removed.
7194         
7195         * t-test.q: (cmd_list) Rename cmd_t_test.
7196
7197         * temporary.c: (new_dictionary) Don't declare as static.
7198         
7199 Fri Nov 21 00:03:06 1997  Ben Pfaff  <blp@gnu.org>
7200
7201         * aggregate.c: Changes, still not finished.
7202
7203         * file-handle.q, frequencies.q, list.q, set.q: Comment fixes.
7204
7205         * q2c.c: Comment fixes.  Now its output is internationalized.
7206         (get_token) Fix parsing of escapes within literal strings.
7207         (main) Fix bad #line directives in output.
7208
7209         * t-test.q: Base implementation.
7210
7211         * temporary.c: (new_dictionary) New function.
7212         (restore_dictionary) [__CHECKER__] Change fill character to *
7213         (from @).
7214         
7215 Sun Nov 16 01:29:57 1997  Ben Pfaff  <blp@gnu.org>
7216
7217         * Makefile.am: (BUILT_SOURCES, fiasco_SOURCES) Add t-test.c
7218
7219         * aggregate.c: Changes, still not finished.
7220
7221         * descript.q, list.q: Comment fixes.
7222
7223         * q2c.c: Almost completely rewritten.
7224
7225         * t-test.q: New file, not complete.
7226
7227 Fri Nov 14 00:14:48 1997  Ben Pfaff  <blp@gnu.org>
7228
7229         * aggregate.c: Changes, still not finished.
7230
7231         * sort.c: (sort_cases) Call cancel_temporary() instead of doing it
7232         by hand.
7233
7234         * temporary.c: (cancel_temporary) New function.
7235
7236         * vars-atr.c: (discard_variables) Call cancel_temporary() instead
7237         of doing it by hand.
7238
7239         * vfm.c: (close_active_file) After restoring a TEMPORARY
7240         dictionary, set temp_dict to NULL.  Cancel TEMPORARY through
7241         cancel_temporary().
7242         (SPLIT_FILE_procfunc) Comment fix.
7243
7244 Tue Oct 28 16:08:45 1997  Ben Pfaff  <blp@gnu.org>
7245
7246         * Makefile.am: (fiasco_SOURCES) Add aggregate.c.
7247
7248         * aggregate.c: New file, not finished yet.
7249
7250         * command.c: (cmd_table) Add AGGREGATE.
7251
7252         * common.h: (pgm_state) Move declaration to var.h.
7253
7254         * lexer.c: (bin_value_func, oct_value_func, hex_value_func) i18n
7255         fixes.
7256         (parse_string) Message fix.
7257
7258         * recode.c: Comment fix.
7259
7260         * sfm-read.c: (read_variables) Code esthetic fixes.
7261         (write_header) Default date is `Jan', not `JAN'.
7262
7263         * sfmP.h: (bswap_int32) [!__linux__] Fix off-by-one errors.
7264
7265         * sort.c: (cmd_sort_cases) Farm the work out to new function
7266         parse_sort_variables().
7267         (parse_sort_variables) New function.
7268         (sort_cases) New function.  Cancels temporary transformations,
7269         which sorting didn't do previously.
7270         (cmd_sort_cases) Better garbage collection on error.  Uses
7271         do_external_sort().
7272         (write_initial_runs, merge_once) Improved code esthetics.
7273         (sort_stream_read) Reduced to one call to read_output_cases().
7274         (read_output_cases) New function.
7275
7276         * var-labs.c: (cmd_variable_labels) Re-enabled truncation of
7277         variable labels to 120 characters.
7278
7279         * var.h: Comment fixes.
7280         (glob var pgm_state) From common.h.
7281
7282         * vars-atr.c: (discard_variables) Set pgm_state to STATE_INIT.
7283
7284         * vars-prs.c: (parse_DATA_LIST_vars) Support PV_SINGLE in
7285         options.  Set *names to NULL on error.
7286
7287         * vfm.c: (memory_stream_init) Assert compaction_nval != 0.
7288
7289 Thu Oct  9 09:59:49 1997  Ben Pfaff  <blp@gnu.org>
7290
7291         * sfm-write.c, vfm.c: [HAVE_UNISTD] #include <unistd.h>, needed by
7292         SunOS4.  From Alexandre Oliva <oliva@dcc.unicamp.br>.
7293
7294 Wed Oct  8 18:55:24 1997  Ben Pfaff  <blp@gnu.org>
7295
7296         * vfm.c: (page_to_disk) Added missing local variables.
7297
7298 Tue Oct  7 20:23:17 1997  Ben Pfaff  <blp@gnu.org>
7299
7300         * get.c: Comment fix.
7301
7302         * sort.c: (cmd_sort_cases) Attempt to perform internal sort if the
7303         source is anything other than a disk stream, not just if it's in a
7304         memory stream.  Call page_to_disk() before external sort.
7305         (allocate_cases) Message fix.
7306
7307         * vfm.c: (prepare_for_writing) Warn user when paging workspace to
7308         disk.
7309         (page_to_disk) New function.
7310
7311 Sun Oct  5 15:56:14 1997  Ben Pfaff  <blp@gnu.org>
7312
7313         * Makefile.am: (INCLUDES) Include .. instead of $(top_srcdir).
7314
7315         * common.h: (macro strerror) Remove.  From Alexandre Oliva
7316         <oliva@dcc.unicamp.br>.
7317
7318         * get.c: (dict_delete_run) The number of variables to delete is
7319         not necessarily the number of variables that need to be shifted
7320         up.
7321         (trim_dictionary) Don't set *options to 0.  Fix bug that caused
7322         too many variables to be deleted.
7323
7324         * postscript.c: Comment fix.
7325
7326         * q2c.c: Include strerror.c.  From Alexandre Oliva
7327         <oliva@dcc.unicamp.br>.
7328
7329         * set.q: #undef ON and OFF.  From Alexandre Oliva
7330         <oliva@dcc.unicamp.br>.
7331
7332         * sfm-read.c: (sfm_read_dictionary) Don't set the file class too
7333         early, otherwise errors cause a bad free().
7334
7335         * str.h: (macro nvsprintf) s/FORMATS/FORMAT/ typo.  From Alexandre
7336         Oliva <oliva@dcc.unicamp.br>.
7337
7338         * temporary.c: (save_dictionary) Don't allocate memory if
7339         n_documents is 0.
7340
7341         * vfm.c: (memory_stream_write) Message fix.
7342
7343 Sat Oct  4 16:20:43 1997  Ben Pfaff  <blp@gnu.org>
7344
7345         * command.c: (static var cmd_table[]) Define REPEATING DATA
7346         command.
7347
7348         * common.h: Added support for broken systems that are missing
7349         EXIT_SUCCESS, EXIT_FAILURE, RAND_MAX, and/or strerror().
7350
7351         * Many source files: Replace syntax error messages via msg() with
7352         call to syntax_error().
7353
7354         * data-list.c: (dump_fixed_table) Add support for dumping table
7355         for REPEATING DATA as well as DATA LIST FIXED.
7356         (cmd_repeating_data) Allows and requires `/' between subcommands.
7357         Does proper thing with allowing rpd.starts_end to stay 0.  Allows
7358         CONTINUED specifications to be omitted.  Forces CONTINUED to be
7359         specified if ID is.  Calculates starts_end, cont_end from logical
7360         record length as reported by fhp.  Calls dump_fixed_table() if
7361         requested.  Fixed length of record copied by memcpy.
7362         (parse_num_or_var) Sets `num' to 0, not NOT_INT, for variables.
7363         Message fix.
7364         (realize_value) Returns sensible value for out-of-range variable
7365         values.
7366         (rpd_parse_record) New argument `ofs'.  Fixed confusion between
7367         length of occurrences and length of line.  Added warning for
7368         fields that exceed the line length.  Fixed infinite loop.
7369         (read_one_set_of_repetitions) Numerous minor changes for more
7370         complete SPSS compliance.  Message fixes.
7371
7372         * dfm.c: (dfm_close) If the file being closed is the inline file,
7373         read all the remaining data before closing it.
7374         (dfm_get_record) Don't close the file on lossage, as either it
7375         has been closed already or it doesn't belong to us.
7376
7377         * error.c: (puts_stdout) New function.
7378         (vmsg) Use puts_stdout instead of puts.
7379
7380         * file-handle.q: (fh_record_width) New function.
7381
7382         * inpt-pgm.c: (init_case) Fixed buffer overrun when inp_nval % 4
7383         == 0.
7384         (clear_case) Ditto.
7385         (input_program_source_read) Made an old kluge an approved method.
7386
7387         * lexer.c: (syntax_error) New function.
7388
7389         * misc.c: [BROKEN_RAND] (ansi_rand, ansi_srand; static var next)
7390         New.
7391
7392         * output.c: (oupt_get_paper_size) Message fix.
7393
7394         * q2c.c: Numerous fixes to formatting of generated code made to
7395         conform to GNU coding standards.  Uses syntax_error() in generated
7396         code.  Other miscellaneous generated message fixes.  Added support
7397         for broken systems that are missing EXIT_SUCCESS, EXIT_FAILURE,
7398         RAND_MAX, and/or strerror().
7399
7400 Sat Oct  4 02:09:56 1997  Ben Pfaff  <blp@gnu.org>
7401
7402         * data-in.c: Comment fixes.
7403
7404         * data-list.c: (struct repeating_data_trns) New member `id_spec'.
7405         (find_variable_input_spec) New function.
7406         (cmd_repeating_data) Initializes id_spec.
7407         (rpd_parse_record) Implemented.
7408         (read_one_set_of_repetitions) Returns -3 by default in order to
7409         kluge out some potential bugs.
7410
7411         * data-out.c: Comment fixes.
7412
7413         * file-type.c: (internal_cmd_record_type) Message fix.
7414
7415         * inpt-pgm.c: (input_program_source_read) Special temporary kluge
7416         for handling -3 return value.
7417
7418 Sat Sep 20 23:58:15 1997  Ben Pfaff  <blp@gnu.org>
7419
7420         * data-list.c: Comment fixes.
7421         (struct dls_var_spec) Reordered members.
7422         (read_from_data_list_fixed) Restructured.
7423         (struct repeating_data_trns) Reordered members.  Renamed `starts'
7424         as `starts_beg', `ends' as `starts_end'.
7425         (cmd_repeating_data) Calculates length of repeated data if
7426         necessary and possible.
7427         (parse_num_or_var) Don't allow string variables.
7428         (realize_value) New function.
7429         (rpd_msg) New function.
7430         (rpd_parse_record) New function.  Currently stubbed out.
7431         (read_one_set_of_repetitions) Implemented.
7432
7433         * inpt-pgm.c: (input_program_source_read) Comment fix.
7434
7435 Thu Sep 18 21:34:57 1997  Ben Pfaff  <blp@gnu.org>
7436
7437         * command.c: (cmd_end_repeat_p) Removed.
7438         (init_cmd_parser) Doesn't set cmd_end_repeat_p.
7439         (parse_cmd_name) Removed.
7440
7441         * data-list.c: Comment fixes.
7442         (data_list_pgm) Removed `eof' member.
7443         (static var first) New var.
7444         (cmd_data_list) Sets `first'.  Ensures that DATA LIST uses the
7445         FILE TYPE file inside FILE TYPE structures.
7446         (append_var_spec) Appends to *first, not dls.spec.
7447         (parse_fixed) Message fixes.
7448         (struct rpd_num_or_var) New.
7449         (struct repeating_data_trns) New.
7450         (static var rpd) New.
7451         (cmd_repeating_data) New function.
7452         (parse_num_or_var) New function.
7453         (parse_repeating_data) New function.
7454         (read_one_set_of_repetitions) New function.
7455
7456         * file-type.c: (cmd_file_type) Message fixes.  Always
7457         default_handle to FILE TYPE file handle.
7458         (internal_cmd_record_type) Message fixes.
7459
7460 Wed Aug 20 14:22:03 1997  Ben Pfaff  <blp@gnu.org>
7461
7462         * repeat.c: Comment fix.  Disable debugging.
7463
7464         * temporary.c: (restore_dictionary) Sets splits to NULL and
7465         n_splits to 0 before destroying the variables because now doing
7466         this tries to remove split variables.
7467
7468         * vars-atr.c: (discard_variables) Asserts that n_splits is 0 after
7469         destroying the dictionary.
7470         (clear_variable) Removes a variable from splits after destroying
7471         it.
7472
7473 Mon Aug 18 18:06:55 1997  Ben Pfaff  <blp@gnu.org>
7474
7475         * cmdline.c: (set_compat) Removed.
7476         (pick_compat) Removed.
7477         (parse_command_line) Removed -c option.
7478         (pre_syntax_message) Removed -c option.
7479         (usage) Remove compatibility code.
7480
7481         * common.h: (macros VER_PC, VER_WND, VER_X) Removed.
7482         (glob var compat) Removed.
7483
7484         * compute.c: (type_check) Fixed messages about type mismatches.
7485
7486         * data-list.c: (cmd_data_list) Removed compatibility code.
7487         (fixed_parse_compatible) Calls convert_negative_to_dash().
7488         Fixed bug where it only set the variable in fx.spec if it created
7489         the variable itself.
7490         (dump_fmt_list) Spelling fix.
7491         (cut_field) Removed compatibility code.
7492
7493         * dfm.c: (cmd_begin_data) Don't require a command terminator on
7494         BEGIN DATA command.
7495
7496         * expr-evl.c: (evaluate_expression) Implement LAG.
7497
7498         * expr-prs.c: (parse_add) Calls convert_negative_to_dash().
7499         (parse_neg) Calls convert_negative_to_dash().
7500         (LAG_func) Increases n_lag to the lag requested.  Fixed assignment
7501         bug.
7502
7503         * expr.h: (struct expression_struct) Removed member max_lag.
7504
7505         * file-type.c: (parse_col_spec) Calls convert_negative_to_dash().
7506         (internal_cmd_record_type) Removed special handling to produce
7507         negative numbers from dash tokens.
7508
7509         * getline.c: (static var DO_REPEAT_level) New var.
7510         (getl_add_DO_REPEAT_file) Increments DO_REPEAT_level.
7511         (handle_line_buffer) Copies the line into getl_buf; doesn't call
7512         copy_with_DO_REPEAT_substitutions().
7513         (getl_read_line) Maintains value of getl_mode.  Calls
7514         perform_DO_REPEAT_substitutions() whenever DO_REPEAT_level is
7515         positive.
7516         (getl_close_file) Decrements DO_REPEAT_level when appropriate.
7517
7518         * getline.h: (getl_mode) New glob var.
7519
7520         * glob.c: Comment fixes.
7521         (init_glob) Restructured.  Sets set_seed.
7522         (init_compat_dependent) Removed.  All references removed.
7523         (get_date) Format changed from MM/DD/YY to DD MMM YYYY.
7524         (__htonl, __htons) Removed.  (What were these for?)
7525
7526         * lexer.c: (static var tbl) Dash set to class CNUM.
7527         (make_hexit) New function from data-out.c.
7528         (get_token_representation) Rewritten.
7529         (convert_negative_to_dash) New function.
7530         (lex_init_compat_dependent) Removed.
7531         (yylex) A dash is parsed as part of a number if it is followed by
7532         a digit.  The ASCII representation of a number is copied to
7533         tokstr.  String parsing farmed out to parse_string().  Comment
7534         fixes.
7535         (bin_value_func, oct_value_func, hex_value_func, parse_string) New
7536         functions.
7537         (preprocess_line) Line processing depends on interactive/batch
7538         mode, not on compatibility mode.  Removed PC+ compatibility code.
7539
7540         * loop.c: (loop_3_trns_proc) Comment fix.
7541
7542         * main.c: Remove dead code.
7543         (main) Remove call to init_compat_dependent().
7544
7545         * misc.c: (convert_fmt_ItoO) Make E format conversion more
7546         conformant.
7547
7548         * print.c: (parse_string_argument) Calls
7549         convert_negative_to_dash().
7550         (fixed_parse_compatible) Calls convert_negative_to_dash().
7551
7552         * repeat.c: (RPT_* defines) Removed.
7553         (struct rpt_numeric) Removed.
7554         (struct repeat_entry) New member type, changed `replacement' from
7555         char * to char **.
7556         (clean_up) Deallocation adapted to new repeat_entry.
7557         (internal_cmd_do_repeat) `type' defaults to 0.  Remove lookahead()
7558         usage.  Creates vars for `type' of 1.
7559         (parse_ids) Sets type of 1.  Adapted to new repeat_entry.
7560         (store_numeric) Rewritten, new interface.
7561         (parse_numbers) Rewritten.
7562         (parse_strings) Rewritten.
7563         (find_DO_REPEAT_substitution) New function.
7564         (perform_DO_REPEAT_substitutions) New function.
7565         (copy_with_DO_REPEAT_substitutions) Removed.
7566         (debug_print) Rewritten.
7567
7568         * set.q: Comment fix.
7569         (custom_results) Removed compatibility code.
7570         (internal_cmd_set) Removed SET EMULATION subcommand.  Removed
7571         compatibility code.
7572
7573         * sysfile-info.c: (cmd_display) Removed compatibility code.
7574
7575         * tokens.h: Comment fixes.
7576         (token types enum) Removed `toktype' typedef name for this int
7577         type.  Removed SUBST.  Restructured.
7578
7579         * vars-atr.c: (discard_variables) Sets n_lag to 0.
7580
7581         * vars-prs.c: Comment fix.
7582
7583         * vfm.c: Comment fixes.
7584         (glob var n_lag) New var.
7585         (static vars lag_count, lag_head, lag_queue) New vars.
7586         (procedure) Removed argument nlag.
7587         (setup_lag) New function.
7588         (close_active_file) Discards lagging state.
7589         (lag_case) New function.
7590         (lagged_case) New function.
7591         (write_case) Lags a case if lagging.
7592
7593         * weight.c: (cmd_weight) Removed compatibility code.
7594         
7595 Sun Aug 17 22:34:40 1997  Ben Pfaff  <blp@gnu.org>
7596
7597         * getline.h: (struct getl_script) New members loop_index, macros.
7598
7599         * getline.c: (getl_add_file) Sets first_line field to NULL.
7600         (getl_add_DO_REPEAT_file) New function.
7601         (handle_line_buffer) When the current line's length is negative,
7602         set the filename and line number.  Increment line number after
7603         reading line.  Pass the line to
7604         copy_with_DO_REPEAT_substitutions() for processing.
7605         (getl_close_file) Free DO REPEAT lines before freeing the
7606         filename, and just set the filename to NULL when doing this,
7607         because otherwise the filename gets freed twice.
7608
7609         * glob.c: (glob var queuing) Removed.  All references removed.
7610
7611         * lexer.c: Comment fixes.
7612         (get_token_representation) New function.
7613
7614         * repeat.c: Comment fixes.
7615         (struct repeat_entry) Replaced type and v union members with a
7616         simple string.
7617         (append_record) New function.
7618         (internal_cmd_do_repeat) Started reforming it for the new
7619         repeat_entry struct.  Properly records filename changes in the
7620         getl_line_buf.  Fixed improper use of = for ==.  Fixed sense of
7621         strncasecmp() result usage.  Uses append_record() to simplify.
7622         Properly discards END REPEAT line.  Calls getl_add_DO_REPEAT_file
7623         to add in the file.
7624
7625         (copy_with_DO_REPEAT_substitutions) Started coding.
7626
7627         [DEBUGGING] (debug_print_lines) New function.
7628
7629         * set.q: (custom_results, internal_cmd_set) s/VER_PCP40/VER_PC/;
7630
7631         * tokens.h: (macro is_id1, is_idn) New macros.
7632
7633 Sat Aug 16 10:57:41 1997  Ben Pfaff  <blp@gnu.org>
7634
7635         * cmdline.c: (static var pre_syntax_message) Changed `win'
7636         compatibility mode to `wnd'.
7637
7638         * data-list.c: (fixed_parse_spss) Renamed
7639         fixed_parse_compatible().
7640
7641         * glob.c: (init_glob) Excise unused code for
7642         program_invocation_short_name.
7643
7644         * lexer.c: (preprocess_line) Leading indentors are ignored in Wnd
7645         as well as in X.
7646
7647         * print.c: (fixed_parse_spss) Renamed fixed_parse_compatible().
7648
7649         * set.q: `win' compatibility renamed `wnd'.
7650
7651 Thu Aug 14 22:11:12 1997  Ben Pfaff  <blp@gnu.org>
7652
7653         * filename.c: [__WIN32__] Change the included Windows header files
7654         (again).
7655         (absolute_filename_p) [__MSDOS__] A filename with a colon as the
7656         second character is absolute.
7657         (dirname) Fix logic error.  Don't printf() the results.
7658         (prepend_dir) Don't printf() the results.
7659
7660         * getline.c: (handle_line_buffer) New function.
7661         (getl_read_line) Reads line with handle_line_buffer() when
7662         appropriate.
7663         (getl_close_file) Discard line buffer data.
7664
7665         * getline.h: Comment fixes.
7666         (struct getl_line_list) New struct.
7667         (getl_script_struct) Added line buffer members.  These are hooks
7668         for use by DO REPEAT to allow it to insert virtual source code
7669         into the program.
7670
7671         * glob.c: (init_glob) [__DJGPP__ || (__WIN32__ && __BORLANDC__)]
7672         Override Borland C++ stupidity that claims Windows has a console
7673         window size of 0x3.
7674
7675         * repeat.c: This is in the process of being restructured from
7676         using a token-buffering approach to the DO REPEAT facility to
7677         using the more flexible approach of a line-buffering approach in
7678         conjunction with the getline module.  Comment fixes.
7679         (struct tok_struct) Removed.
7680         (static vars queue_index, queue_head, queue) Removed.
7681         (static vars line_buf_head, line_buf_tail) New vars.
7682         (internal_cmd_do_repeat) Instead of queuing tokens, queue lines.
7683         Not complete.
7684         (pull_queue, destroy_queue) Removed.
7685         [DEBUGGING] (debug_print_tokens) Removed.
7686
7687 Tue Aug  5 13:57:58 1997  Ben Pfaff  <blp@gnu.org>
7688
7689         * file-handle.q: (prepend_current_directory) New function.
7690         (internal_cmd_file_handle, fh_get_handle_by_filename) Prepends
7691         current directory before normalizing filename.
7692
7693         * filename.c: (gnu_getcwd) New function.
7694         (absolute_filename_p) New function.
7695         (search_path) New argument, PREPEND.  All references changed to
7696         pass NULL except those explicitly mentioned.  Uses
7697         absolute_filename_p().  Prepends PREPEND before trying the
7698         filename.
7699         (dirname, prepend_dir) New functions.
7700
7701         * getline.c: (getl_get_current_directory) New function.
7702         (getl_include) Passes getl_get_current_directory() as PREPEND arg
7703         to search_path().
7704                 
7705 Sun Aug  3 11:42:36 1997  Ben Pfaff  <blp@gnu.org>
7706
7707         * In several source files, the term `script' was replaced with
7708         `syntax file' inside error messages.  Usage of the term `script'
7709         in the sense of a syntax file is now deprecated.
7710
7711         * cmdline.c: (static vars pre_syntax_message, post_syntax_message)
7712         Updated messages.
7713
7714         * dump-sysfile.c: (usage) Update message.
7715
7716         * getline.c: (getl_read_line) Ignore lines beginning with `#!'.
7717
7718         * getline.h: (glob var getl_include_path) Declare extern.
7719
7720         * list.q: Define EXTERN as extern before #including somP.h.
7721
7722         * var.h: Remove declaration of `disptype' variable.
7723
7724         * vfm.c: (close_active_file) After switching the data sink to a
7725         data source, set vfm_sink to NULL, because it doesn't exist any
7726         more.
7727
7728 Thu Jul 17 21:41:44 1997  Ben Pfaff  <blp@gnu.org>
7729
7730         * glob.c: [__BORLANDC__] Include math.h.  Define _matherr() and
7731         _matherrl() to ignore all math errors.
7732
7733         * sfm-read.c: (read_value_labels) When reading the labels from
7734         disk, read the little parts separately instead of as a struct;
7735         this avoids alignment problems.
7736
7737         * sfm-write.c: (struct sfm_fhuser_ext) New member `elem_type'.
7738         (sfm_write_dictionary) Sets elem_type and frees it on lossage.
7739         (write_header) Allocates and initializes elem_type.
7740         (sfm_write_case) Uses elem_type to determine how to handle each
7741         flt64 element.
7742         (sfm_close) Frees elem_type.
7743
7744         * sfmP.h: Comment fix.
7745         [__BORLANDC__] Uses #pragma -a to adjust structure member
7746         alignment.
7747         
7748 Thu Jul 17 01:55:12 1997  Ben Pfaff  <blp@gnu.org>
7749
7750         * Makefile.am: (fiasco_SOURCES) Remove display.c.
7751
7752         * common.c: Fix typo.
7753
7754         * dfm.c: (read_record) Remove strncasecmp() emulation and fix the
7755         sense of the condition.
7756
7757         * expr-evl.c: (macro ALLOC_STRING_SPACE) [!PAGED_STACK] Add
7758         line-continuation backslash.
7759
7760         * filename.c: [__WIN32__] Include <windef.h> before <winbase.h>.
7761
7762         * frequencies.q: (custom_grouped, add_percentile) Don't use a
7763         non-constant expression as an argument to sizeof.
7764
7765         * glob.c: [__WIN32__ && __BORLANDC__] When including <conio.h>,
7766         undefine gettext macro because that's a conio function.
7767
7768         * hash.h: (hsh_prime_tab declaration) Remove.
7769
7770         * list.q: (write_fallback_headers) Move `leader' allocation out of
7771         main loop.  Change to local_alloc() allocation.
7772
7773         * output.h: Formatting fixes.  Put __attribute__ in right place on
7774         function prototypes.
7775
7776         * sfm-read.c: (read_machine_flt64_info, read_variables) Change
7777         incorrect `SECOND_LOWEST_VALUE' references to proper
7778         `second_lowest_value'.
7779
7780         * som-frnt.c: (EXTERN macro) Define as `extern' instead of null
7781         value.  This way 2 out of 3 of the som files define the vars
7782         extern, the correct way, that actually works under BC++.
7783         (som_set_float) Don't use nonconstant initializers for a struct.
7784
7785         * som-high.c: Add the standard alloca() header.
7786         (replicate_table) Add prototype.
7787
7788         Merged DISPLAY routine.
7789         * sysfile-info.c: (AS_*) New enum series.
7790         (cmd_sysfile_info) Gutted.  Calls describe_variable() to do the
7791         dirty work.
7792         (cmd_display, display_macros, display_documents,
7793         display_variables) Stolen from defunct display.c.
7794         (describe_variable) New function.
7795
7796         * temporary.c: [0] (display_tree) New debug function.
7797         (copy_variable) Performs shallow copy of value labels instead of
7798         deep copy; i.e., just copys the AVL tree and increments the
7799         reference counts.
7800
7801         * val-labs.c: Comment fixes.
7802         (do_value_labels) Optionally skip leading forward slash.
7803         (get_label) Creates only a single value label instead of many
7804         copies of one, and sets the reference count.
7805
7806         * display.c: Removed.
7807
7808         * dump-sysfile.c: New file, not yet complete.
7809
7810 Fri Jul 11 23:02:18 1997  Ben Pfaff  <blp@gnu.org>
7811
7812         For lots of source files I added more verbose_msg's.  These aren't
7813         listed below as they have tested as being benign.  In some cases
7814         these replaced debug_printf() calls.
7815
7816         * output.c: (outp_read_devices) Message fix.
7817
7818         * postscript.c: (output_encodings) Message fix.  Reports errors on
7819         fclose().
7820         (postopen) Message fix.
7821         
7822 Fri Jul 11 14:09:40 1997  Ben Pfaff  <blp@gnu.org>
7823
7824         * dfm.c: (dfm_close) Don't call fclose() for a NULL FILE.
7825
7826         * filename.c: (close_file_ext) Set f->file to NULL *after* closing
7827         it.
7828
7829         * main.c: Remove <malloc.h> #include.
7830
7831         * mis-val.c: (parse_numeric) Set .f member for each missing[]
7832         instead of trying to just set the missing[] itself, which is a
7833         gcc-specific idiom.
7834
7835         * sfm-read.c: (read_variables) Same.
7836
7837         * str.h: Add memmem() prototype.
7838
7839         * val-labs.c, var-labs.c: Replace <malloc.h> with <stdlib.h>.
7840
7841 Thu Jul 10 22:13:53 1997  Ben Pfaff  <blp@gnu.org>
7842
7843         * Makefile.am: (q2c) Don't include any libraries in the link.
7844
7845         * dfm.c: (force_line_buffer_extension) New macro.
7846         (count_tabs) New function.
7847         (tabs_To_spaces) New function.
7848         (read_record) Calls tabs_to_spaces() on the line being processed.
7849
7850         * q2c.c: Disabled i18n for this proglet so that libintl.a doesn't
7851         have to be compiled twice (once for CC, once for LOCAL_CC).
7852  
7853 Sun Jul  6 19:14:33 1997  Ben Pfaff  <blp@gnu.org>
7854
7855         * Makefile.am: (INCLUDES) Add intl directory; fix directories.
7856         (LDADD) Add @INTLLIBS@.
7857         (q2c) Add LIBS, @INTLLIBS@ to link step.
7858
7859         * inpt-pgm.c: Turn off debugging.
7860
7861         * postscript.c: (postopen) Format fix.  local_free() blocks
7862         returned by local_alloc(); don't free() them.
7863
7864 Sat Jul  5 23:44:51 1997  Ben Pfaff  <blp@gnu.org>
7865
7866         * data-in.c: (parse_string_as_format) Comment fix.  Fix check for
7867         string length.
7868
7869         * data-list.c: (read_from_data_list_fixed) Pass proper value for
7870         LEN arg, not simply the full string length.
7871
7872         * sort.c: (allocate_file_handles) Check SPSS compatible temp file
7873         directories before generic temp file directories.
7874
7875         * vfm.c: Disable debugging.
7876
7877 Fri Jul  4 13:26:41 1997  Ben Pfaff  <blp@gnu.org>
7878
7879         * get.c: Comment fix.
7880         (cmd_save_internal) Always passes GTSV_OPT_SAVE option.
7881
7882 Wed Jun 25 22:52:28 1997  Ben Pfaff  <blp@gnu.org>
7883
7884         * expr-prs.c: (debug_print_postfix) Conditionally included on
7885         GLOBAL_DEBUGGING.  Removed out_header() reference.
7886
7887         * exprP.h: Removed #undef GLOBAL_DEBUGGING.
7888
7889 Sun Jun 22 22:00:28 1997  Ben Pfaff  <blp@gnu.org>
7890
7891         * ascii.c: Removed obsolete ascii_close_page() prototype.
7892
7893         * command.c: (output_line) Comment fix.
7894
7895         * data-in.c: Formatting fix.
7896         (parse_string_as_format) Now the `fc' argument is used only for
7897         the purpose of error messages; it is not an index into the string
7898         passed.  All references changed.
7899
7900         * data-list.c: Comment fix.
7901         (cut_field) Comment fix.  Now returns the column number of the
7902         position of the field cut out on success.
7903         (parse_field) Added `column' argument.  Puts the column numbers in
7904         the error message.
7905         (read_from_data_list_free, read_from_data_list_list) Record the
7906         column number returned by cut_field(), pass it to parse_field().
7907
7908         * dfm.c: Comment fix.
7909
7910         * do-ifP.h: Comment fix.
7911
7912         * expr-prs.c: (SYSMIS_func) Implemented string-type arguments for
7913         the SYSMIS function.
7914
7915         * expr.h, exprP.h: Comment fix.
7916
7917         * glob.c: (init_glob) Only calls setlocale() and family if
7918         ENABLE_NLS set.
7919
7920         * hash.h: Comment fix.
7921
7922         * include.c: Comment fix.
7923
7924         * output.c: Comment fix.
7925
7926         * postscript.c: (ps_line_intersection) Simplified assertion.
7927
7928         * repeat.c: Comment fix.
7929
7930         * vars-atr.c: Comment fix.
7931
7932         * vars-prs.c: Comment fix.
7933
7934         * vfm.c: (vector_initialization) [DEBUGGING] Fixed undefined
7935         behavior with usage of postincrement.
7936         (memory_stream_read) Discards cases as it goes. 
7937
7938 Sun Jun 15 16:45:17 1997  Ben Pfaff  <blp@gnu.org>
7939
7940         * Makefile.am: Cleans q2c, not just distcleans it.  Distcleans
7941         foo.
7942
7943         * Most source files: Includes debug-print.h, related comment
7944         fixes.
7945
7946         * cases.c: (alloc_val) Removed complex allocation code.  Merely
7947         increments default_dict.nval and returns the former value.
7948         (envector, devector) Removed references to lv member of struct
7949         variable.
7950
7951         * common.h: (macro VME) Replaced complex definition with simple
7952         one.
7953
7954         * data-list.c: (cmd_data_list) Sets vfm_source instead of
7955         read_active_file and cancel_input_pgm.
7956         (read_from_data_list, cancel_data_list) Removed.
7957         (data_list_source_read, data_list_source_destroy_source) New
7958         functions.
7959         (glob var data_list_source) New var.
7960
7961         * dfm.c: (open_file_r, open_file_w) Simplified debug output.
7962         (cmd_begin_data) Improved criteria for an input program accessing
7963         the inline file.  Still not perfect.
7964
7965         * do-if.c: (do_if_trns_proc) Simplified debug output.
7966
7967         * expr-prs.c: Comment fixes.
7968         [DEBUGGING] (debug_print_postfix) Simplified debug output.
7969
7970         * file-handle.q: (fh_close_handle) Simplified debug output.
7971
7972         * file-type.c: Comment fixes.
7973         (cmd_file_type) Sets vfm_source instead of read_active_file and
7974         cancel_input_pgm.
7975         (cmd_end_file_type) On failure, discards variables in place of
7976         just canceling the input program.
7977         (read_from_file_type) Renamed file_type_source_read.
7978         (cancel_file_type) Renamed file_type_source_destroy_source.
7979         (glob var file_type_source) New var.
7980
7981         * get.c: (GTSV_* enum series) New enums GTSV_OPT_SAVE, GTSV_NONE.
7982         (cmd_get) Initializes options to GTSV_NONE before passing to
7983         trim_dictionary().  Removed `lv' reference.  Sets vfm_source
7984         instead of read_active_file and cancel_input_pgm.
7985         (cmd_save_internal) Initializes options before passing to
7986         trim_dictionary().  Local var `nval' removed.
7987         (dict_delete_run) Comment fixes.
7988         (trim_dictionary) Comment fixes.  Disallows scratch variables if
7989         GTSV_OPT_SAVE set in options.
7990         (read_from_get) Renamed get_source_read.
7991         (cancel_get) Renamed get_source_destroy_source.
7992         (glob var get_source) New var.
7993
7994         * inpt-pgm.c: (cmd_input_program) Sets vfm_source instead of
7995         read_active_file and cancel_input_pgm.
7996         (read_from_input_program) Renamed input_program_source_read.
7997         Simplified debug output.
7998         (cancel_input_program) Renamed
7999         input_program_source_destroy_source.
8000         (glob var input_program_source) New var.
8001
8002         * loop.c: (loop_1_trns_proc) Simplified debug output.
8003
8004         * main.c: (dump_token) Made eof output more explicit.
8005
8006         * sfm-read.c: (read_variables, dump_dictionary) Removed `lv'
8007         references.
8008
8009         * sort.c: (cmd_sort_cases) Disallows scratch variables.  Removed
8010         code for always-memory or always-disk cases.  malloc's case-list
8011         based on vfm_source_info.ncases.  Explicit support for
8012         memory_stream via memory_source_cases.
8013         (do_external_sort) Sets vfm_source instead of read_active_file and
8014         cancel_input_pgm.
8015         (allocate_file_handles) The temporary directory permissions are
8016         set to 0700 instead of 0777.
8017         (allocate_cases) Formatting fixes.  Simplified debug output.
8018         (output_record) Compacts the case if necessary before writing it
8019         out.
8020         (close_handle, open_handle_w) Simplified debug output.
8021         (write_initial_runs) Destroys vfm_sink, then sets it to
8022         sort_stream.  Writes records to memory based on
8023         vfm_sink_info.case_size.
8024         (write_to_sort_cases) Renamed sort_stream_write().
8025         (merge) Simplified error handling.  Simplified debug output.
8026         Formatting fixes.
8027         (read_from_external_sort) Renamed sort_stream_read().
8028         Reads records based on vfm_source_info.case_size.
8029         (sort_stream_write) Writes records to memory based on
8030         vfm_sink_info.case_size.
8031         (sort_stream_mode) New function.
8032         (glob var sort_stream) New variable.
8033
8034         * temporary.c: (cmd_temporary) Simplified debug output.
8035         (copy_variable) Removed references to `lv'.
8036
8037         * title.c: (get_title) Simplified debug output.
8038
8039         * var.h: Comment fixes.
8040         (struct get_proc) Removed member `lv'.
8041         (struct variable) Removed member `lv'.  Comment fixes.
8042         (glob vars read_active_file, write_active_file, cancel_input_pgm)
8043         Removed.
8044         (struct case_stream) New.
8045
8046         * vars-atr.c: (discard_variables) Changed cancel_input_pgm,
8047         read_active_file references to use vfm_source.
8048         (init_variable, replace_variable) Removed references to `lv'.
8049
8050         * vfm.c: Comment fixes.
8051         (glob var vfm_source, vfm_sink, vfm_source_info, vfm_sink_info)
8052         New variables.
8053         (static var queue, qh, qt, n_lag) Removed.  All references
8054         removed.
8055         (glob var compaction_necessary, compaction_nval, compaction_case,
8056         paging) New variables.
8057         (record_case) Removed.
8058         (procedure) Comment fixes.  Calls vfm_source->read() instead of
8059         read_active_file().
8060         (lag) Removed.
8061         (prepare_for_writing, arrange_compaction, make_temp_case,
8062         vector_initialization, setup_filter) New function.
8063         (open_active_file) Most of the code moved into the abovementioned
8064         new functions.  Now sets temp_dict to &default_dict if there is no
8065         temporary dictionary, for convenience.  New debug output.
8066         (close_active_file) Deals with changing the sink to the source.
8067         Calls finish_compaction().  Frees compaction_case.  Mostly
8068         rewritten.
8069         (glob vars disk_source_file, disk_sink_file) New vars.
8070         (destroy_active_file, read_from_memory) Removed.
8071         (disk_stream_init, disk_stream_read, disk_stream_write,
8072         disk_stream_mode, disk_stream_destroy_source,
8073         disk_stream_destroy_sink) New functions.
8074         (glob var vfm_disk_stream) New var.
8075         (glob vars memory_source_cases, memory_sink_cases,
8076         memory_sink_iter, memory_sink_max_cases) New vars.
8077         (memory_stream_init, memory_stream_read, memory_stream_write,
8078         memory_stream_mode, memory_stream_destroy_source,
8079         memory_stream_destroy_sink) New functions.
8080         (glob var vfm_memory_stream) New var.
8081         (write_case) Local var `i' renamed `cur_trns'; local var `retval'
8082         named `more_cases'.  Simplified debug output.  Otherwise mostly
8083         rewritten.
8084         (record_case) Moved into the stream drivers.  Removed.
8085         (transform) Removed (was dead code).
8086         (SPLIT_FILE_procfunc) s/vfm_replacement/vfm_sink_info/.  In the
8087         common case that the splits don't change, we don't need to copy
8088         the case into prev_case again--pointless.
8089         (compact_case) New function.
8090         (finish_compaction) New function.
8091
8092         * vfmP.h: Comment fixes.
8093         (DEV_* enum series) Removed. 
8094         (struct storage) Renamed `stream_info'.  Removed variant record.
8095         Removed `device' member.
8096
8097         * debug-print.h: New file.
8098         
8099 Sun Jun  8 01:12:38 1997  Ben Pfaff  <blp@gnu.org>
8100
8101         * autorecode.c: Turned off debugging.
8102
8103         * data-list.c: (destroy_dls) Closes the associated file handle.
8104
8105         * descript.q: (custom_variables) Added PV_NO_SCRATCH to
8106         parse_variables() options.
8107
8108         * dfm.c: (open_file_r) Removed gratuituous argument to msg() call.
8109
8110         * display.c: (display_variables) Really fixed null cell bug.
8111
8112         * file-handle.q: (fh_close_handle) Changed debugging message.
8113
8114         * frequencies.q: (custom_variables) Added PV_NO_SCRATCH to
8115         parse_variables() options.
8116
8117         * list.q: Added PV_NO_SCRATCH in q2c varlist options.
8118         (cmd_list) Fails if no variables specified.
8119         (determine_layout) Writes blank lines manually.
8120
8121         * loop.c: (loop_1_trns_proc) Made debugging code only print
8122         messages if debugging.
8123
8124         * q2c.c: (dump_subcommand) Appends sbc->message to SBC_VARLIST
8125         parse_variables() arguments.
8126         (main) Parses optional parenthesized options to varlist
8127         subcommands into sbc->message.
8128
8129         * sfm-read.c: Format fix.
8130
8131         * var.h: (FV_*) New enum series.
8132         (PV_*) New enum PV_NO_SCRATCH.
8133
8134         * vars-prs.c: (find_var) Removed.
8135         (fill_all_vars) Takes FV_* enum instead of boolean third
8136         argument.  Rewritten to deal with scratch as well as system
8137         variables.
8138         (parse_variables) Error message on scratch variable if
8139         PV_NO_SCRATCH set.
8140
8141         * vfm.c: (static var virt_begin_func) New var.
8142         (procedure) Sets up virt_begin_func.
8143         (SPLIT_FILE_procfunc) For the first case, calls virt_begin_func()
8144         after dump_splits().  For succeeding groups changes, calls
8145         virt_begin_func() instead of begin_func().      
8146
8147 Fri Jun  6 22:42:23 1997  Ben Pfaff  <blp@gnu.org>
8148
8149         * count.c, data-out.c, file-handle.q, list.q, loop.c: Turned off
8150         debugging.
8151
8152         * dfm.c: Added some debugging messages, disabled by default.
8153         (open_file_r) Fixed error message.
8154         (read_record) On eof on inline_file, instead of calling
8155         fh_close_handle(), simply jump to eof label like a normal file.
8156         Message fixes.
8157
8158         * display.c: Thin lines between rows for certain kinds of
8159         listing.  Fixed `null cell' bug.
8160
8161         * error.c: (failure) Flush stdout, stderr before failing.
8162
8163         * file-handle.q: (fh_close_handle) Added debugging message.
8164
8165         * frequencies.q: (dump_full) Bottom line extends across entire
8166         table width.  Changed title formatting.
8167         (dump_condensed) Changed title formatting.
8168         (dump_statistics) Fixed title formatting.
8169
8170         * glob.c: (init_glob) Moved initialization of cur_proc out of #if.
8171         Sets default value of set_format.
8172
8173         * list.q: (cmd_list) Calls blank_line() before determine_layout().
8174         Passes write_all_headers() to procedure() as pre-group func.
8175         (write_all_headers) New function.
8176         (determine_layout) Removed calls to write_header().
8177         Calls blank_line() before and after write_fallback_headers().
8178
8179         * recode.c: (recode_trns_free) Only attempts to free head->map if
8180         non-NULL.
8181
8182         * sfm-read.c: (read_variables) Allows `#' at beginning of system
8183         file variable names but gives a warning.  Sets `left' based on
8184         first character being/not being `#'.  On lossage frees dict->var.
8185
8186         * som-high.c: (som_draw_title) Simplified title formatting.
8187
8188         * vfm.c: (dump_splits) Fixed and changed splits formatting.
8189
8190 Thu Jun  5 22:51:15 1997  Ben Pfaff  <blp@gnu.org>
8191
8192         * autorecode.c: (cmd_autorecode) Sets h_trans to NULL at
8193         beginning.  Frees v_src, v_dest on successful exit.  Frees
8194         h_trans[*], h_trans on lossage.
8195         (recode) Frees h_trans[*], h_trans.
8196
8197         * dfm.c: (dfm_close) Formatting change.
8198         (open_inline_file) Now passed a dfm_fhuser_ext to initialize; no
8199         longer allocates its own in inline_file.
8200         (open_file_r) Passes the local dfm_fhuser_ext to
8201         open_inline_file().
8202         (open_file_w) Message fix. 
8203         (read_record) Buffer reallocation strategy changed.  Frees
8204         ext->line even in inline_file to prevent leaks.
8205         (dfm_put_record) Fixed bug where `ext' was cached before the file
8206         was opened and thus it would be NULL when the file really was
8207         open.
8208         (cmd_begin_data) Sets up inline_file basics itself, then calls
8209         open_inline_file() for the dfm_fhuser_ext.  Formatting fix.
8210
8211         * list.q: (write_line) Formatting fix.
8212         (clean_up) Minor strategy change.  Sets proportional font after
8213         finishing cleanup.
8214         (determine_layout) Sets fixed font before writing regular headers,
8215         or after writing fallback headers.
8216
8217         * modify-vars.c: (cmd_modify_vars) Frees variable lists for DROP
8218         and KEEP vars after using them.
8219
8220         * postscript.c: (ps_init_driver) Frees x->family.
8221         (postopen) When loading fonts, free the temporary font name buffer
8222         after using it.
8223         (ps_text_set_font_by_position) Free temporary font name buffer
8224         after using it.
8225         (text) Fixed code that calculated `lig' so that `lig' always gets
8226         initialized.  Formatting fix.
8227
8228         * som-low.c: (get_cell_size, som_get_table_size) `prop_height' ->
8229         `font_height'.
8230         [GLOBAL_DEBUGGIGN] (check_table) Use arena_alloc() to allocate
8231         cells, not xmalloc(), so that the cells will get destroyed
8232         automatically.
8233
8234         * sysfile-info.c: (cmd_sysfile_info) Frees the dictionary after
8235         using it.
8236
8237 Tue Jun  3 23:33:22 1997  Ben Pfaff  <blp@gnu.org>
8238
8239         * ascii.c: (ascii_text_draw) Always sets metrics for strings that
8240         are drawn.
8241
8242         * dfm.c: Comment fix.
8243
8244         * list.q: Comment fixes.  Include somP.h.  Removed static vars
8245         table, n_columns, n_rows, part.  New struct list_ext.  New static
8246         var line_buf.
8247         (n_lines_remaining, n_chars_width, write_line) New functions.
8248         (cmd_list, list_cases) Rewritten.
8249         (begin_row, end_row, flush_table) Removed.
8250         (write_header, clean_up, write_varname, write_fallback_headers,
8251         determine_layout) New functions.
8252
8253         * output.c: (outp_iterate_enabled_drivers) Minor reformat.
8254
8255         * output.h: Comment fix.
8256
8257         * postscript.c: Comment fix.
8258         (struct ps_driver_ext) Removed prop_size, fixed_size members;
8259         added font_size.  All references changed.
8260         (ps_init_driver) Initializes font_size.  Simplified space checking
8261         code.
8262         (static var option_tab[]) Removed prop-size, fixed-size; added
8263         font-size.
8264         (ps_option) Handles font_size.
8265
8266         * som-high.c: Moved prototypes into somP.h.
8267         (som_init_driver) New function.
8268         (som_submit_table) Moved some code into new function
8269         som_init_driver().
8270         (build_target) Moved some code into new function
8271         som_internal_eject_page().
8272         (som_eject_page) Uses som_internal_eject_page().
8273         (som_internal_eject_page) New function.
8274
8275         * som-low.c: Moved prototypes into somP.h.
8276
8277         * som.h: Formatting fixes.
8278
8279         * somP.h: (struct som_driver_ext) Removed em_width;
8280         added prop_em_width, fixed_width.
8281
8282 Mon Jun  2 14:25:25 1997  Ben Pfaff  <blp@gnu.org>
8283
8284         * Makefile.am: Added `localedir' definition.  Added
8285         -DLOCALEDIR="..." to DEFS.  Added -I. to INCLUDES.
8286
8287         * ascii.c: (macro draw_line) Fixed capitalization.
8288
8289         * ascii.c, autorecode.c, cases.c, cmdline.c, command.c, common.c,
8290         compute.c, count.c, data-in.c, data-list.c, data-out.c,
8291         descript.q, dfm.c, display.c, do-if.c, error.c, expr-evl.c,
8292         expr-opt.c, expr-prs.c, file-handle.q, file-type.c, filename.c,
8293         formats.c, frequencies.q, get.c, getline.c, glob.c, groff-font.c,
8294         hash.c, heap.c, include.c, inpt-pgm.c, lexer.c, list.q, loop.c,
8295         main.c, mis-val.c, misc.c, modify-vars.c, numeric.c, output.c,
8296         postscript.c, print.c, q2c.c, recode.c, rename-vars.c, repeat.c,
8297         sample.c, sel-if.c, sfm-read.c, sfm-write.c, sfmP.h, som-frnt.c,
8298         som-high.c, som-low.c, sort.c, split-file.c, sysfile-info.c,
8299         temporary.c, title.c, tokens.h, val-labs.c, var-labs.c,
8300         vars-atr.c, vars-prs.c, vector.c, vfm.c, weight.c: Marked strings
8301         for internationlization.
8302
8303         * glob.c: [HAVE_LOCALE_H] Includes locale.h.
8304
8305 Sun Jun  1 23:31:18 1997  Ben Pfaff  <blp@gnu.org>
8306
8307         * do-if.c, sort.c, val-labs.c: Comment fixes.
8308
8309         * glob.c: (init_glob) Uncommented, updated i18n support.
8310         
8311         * arena.c, ascii.c, data-in.c, descript.q, error.c, expr-evl.c,
8312         expr-opt.c, expr-prs.c, filename.c, frequencies.q, groff-font.c,
8313         output.c, postscript.c, sfm-read.c, som-high.c, vars-prs.c: Made
8314         the declarations of macros taking arguments a lot nicer.
8315
8316 Sun Jun  1 17:22:04 1997  Ben Pfaff  <blp@gnu.org>
8317
8318         * error.h: Removed CE, CW aliases for SE, SW.
8319
8320         * q2c.c: Removed explicit streq() definition since it's duplicated
8321         in str.h.
8322         
8323         * approx.h, error.h, font.h, hash.h, misc.h, output.h, somP.h,
8324         stats.h, str.h, tokens.h: Made the declarations of macros taking
8325         arguments a lot nicer-looking of <pinard@iro.umontreal.ca>.
8326         Comment fixes.
8327
8328 Sun Jun  1 12:02:06 1997  Ben Pfaff  <blp@gnu.org>
8329
8330         * cmdline.c: Comment fixes.
8331         (pick_compat) Changed return type to int.  Now, instead of setting
8332         glob var `compat' to the emulation, returns the emulation.  All
8333         references changed.
8334         (parse_command_line) Added terminating null to end of
8335         `long_options' array definition.
8336         (pre_syntax_message) Fixes.
8337         (usage) Shows the default emulation in the syntax message by
8338         calling pick_compat().
8339
8340         * getline.c: (getl_add_include_dir) Separates paths with
8341         PATH_DELIMITER, not DIR_SEPARATOR.
8342
8343         * glob.c: (init_glob) Fixed references to DEFAULT_VER_PCP40,
8344         DEFAULT_VER_WIN61, DEFAULT_VER_X40.
8345
8346         * output.c: (outp_configure_macro) Make earlier definitions for a
8347         particular key override later ones for the same key.
8348         
8349 Fri May 30 19:40:49 1997  Ben Pfaff  <blp@gnu.org>
8350
8351         * ascii.c: Comment fixes.
8352
8353         * output.c: (outp_get_paper_size)
8354         s/STAT_OUTPUT_INIT_FILE/STAT_OUTPUT_PAPERSIZE_FILE/.
8355         
8356 Sun May 25 22:34:07 1997  Ben Pfaff  <blp@gnu.org>
8357
8358         * ascii.c, postscript.c, sfm-read.c, sfm-write.c, sort.c: Include
8359         <errno.h>.  GNU libc 2 enforces this!
8360
8361         * command.c: (parse_cmd) Fixed problem with `else' clause being
8362         paired with wrong `if'.  Comment fix.
8363
8364 Fri May  9 16:53:52 1997  Ben Pfaff  <blp@gnu.org>
8365
8366         * getline.c: [!HAVE_LIBREADLINE] (read_console) Changed
8367         blp_getline() to getline().
8368
8369         * output.c: (outp_eval_dimension) Changed the fix from last time;
8370         there was no variable `a'.
8371
8372         * q2c.c: (get_line) Fixed boundary condition overrun bug.
8373
8374 Mon May  5 21:58:22 1997  Ben Pfaff  <blp@gnu.org>
8375
8376         * output.c: (outp_evaluate_dimension) Fixed handling of negative
8377         numbers having fractional parts.  Added case of a fraction without
8378         a whole-number part.
8379
8380 Fri May  2 22:08:05 1997  Ben Pfaff  <blp@gnu.org>
8381
8382         * ascii.c: (ascii_text_get_font_position) Removed.
8383
8384         * expr.h, exprP.h: Disabled debugging.
8385
8386         * groff-font.c, postscript.c: Changed `groff' to `Groff' in
8387         several places.
8388
8389         * output.h: (struct outp_class_struct) Removed
8390         text_get_font_position method.  All references deleted.
8391
8392         * postscript.c: Big change here.  Fontmaps were completely
8393         eliminated because of a change in philosophy.  Comment fixes.
8394         (struct ps_fontmap, ps2dit_map, font_family, dit2family_map)
8395         Removed.
8396         (struct ps_driver_ext) `position', `fontmap', `prop_name',
8397         `fixed_name' members removed.  New members `prop_family',
8398         `fixed_family'.  `family' member changed to type char *.
8399         (static var ps_fontmaps) Removed.
8400         () Removed.
8401         (ps_init_driver) Removed obsolete references, updated.
8402         Initializes `translate_x', `translate_y', `scale'.  Doesn't read
8403         fontmap, of course.  Refers to font names through internal_name
8404         rather than subversive means.  Frees proper items.
8405         (static var option_tab[]) Removed `fontmap-file' option; renamed
8406         `fixed-font', `prop-font'.
8407         (ps_option) Corresponds to option_tab[].
8408         (read_fontmap, release_fontmap, ps_to_dit, compare_ps2dit,
8409         hash_ps2dit, compare_dit2family, hash_dit2family, compare_family,
8410         hash_family) Removed.
8411         (postopen) Generates font names from family names.  Gets
8412         PostScript font name properly.  New prologue file comment `!!!'
8413         style.
8414         (ps_open_page) Adds translate_x, translate_y to BP prologue
8415         function; gives SF argument floating-point format.
8416         (ps_text_set_font_by_name) Doesn't try to map PostScript->Groff
8417         font name.  Doesn't change font family.
8418         (ps_text_set_font_by_position) Generates Groff font name from font
8419         family name instead of through table lookup.
8420         (ps_text_set_font_by_family) Renamed `ps_text_set_font_family',
8421         all references changed.  Reduced to simple string assignment.
8422         (ps_get_font_name) Removed.
8423         (ps_get_font_family) Reduced to string return.
8424         (text) Doesn't save `position' since it no longer exists.  Ugly
8425         kluge to save font family--fix soon?
8426         (load_font) Removed PostScript name argument.
8427         
8428 Thu May  1 14:58:59 1997  Ben Pfaff  <blp@gnu.org>
8429
8430         * postscript.c: Comment fix.
8431         (ps_open_page) Puts scale factor in PostScript output.
8432         
8433 Sat Apr 26 11:49:32 1997  Ben Pfaff  <blp@gnu.org>
8434
8435         * Makefile.am: Distcleans q2c.
8436
8437 Wed Apr 23 21:33:48 1997  Ben Pfaff  <blp@gnu.org>
8438
8439         * ascii.c: (delineate) Sets text size even if width is zero.
8440
8441         * command.c: Comment fix.
8442         (static var cmd_table[]) Re-enabled EVALUATE command.
8443         (parse_cmd) Lotsa comment fixes.  Fixed infinite loop in parsing
8444         of comments in script files.  Now more liberal on criteria for
8445         performing a state transition--if *anything* happened correctly,
8446         not just if *everything* happened correctly.
8447
8448         * data-out.c: (convert_F) Comment fix.  Why in the fsck does
8449         Checker segfault on formatting large numbers and why in the fsck
8450         hadn't I noticed this before?
8451
8452         * expr.h, exprP.h: No longer turn off GLOBAL_DEBUGGING.
8453
8454         * list.q: (cmd_list) Commented out the actual output routine
8455         because of various problems.  Probably will abandon the idea of
8456         using the general `crushed tables' for the LIST procedure.
8457
8458         * temporary.c: (restore_dictionary) Sets var_by_name to NULL after
8459         clearing it.  Allocates a new var_by_name dictionary before trying
8460         to add members to it.
8461
8462         * vars-atr.c: [DEBUGGING] (dump_one_var_node) Removed argument
8463         `sib'.  Changed type of `node' argument.
8464         [DEBUGGING] (dump_var_tree) Replaced avlwalk() with
8465         avl_walk_inorder().
8466         (clear_variable) Only dumps the var tree if var_by_name non-NULL.
8467         [DEBUGGING] Only deletes the variable from var_by_name if that var
8468         non-NULL.
8469
8470 Fri Apr 18 16:48:41 1997  Ben Pfaff  <blp@gnu.org>
8471
8472         * Makefile.am: Added include files to SOURCES.  Added
8473         frequencies.q to EXTRA_DIST.  Removed include/ from INCLUDES.  Now
8474         includes rules for q2c.  Added `boast' target.
8475
8476 Fri Apr 18 15:42:22 1997  Ben Pfaff  <blp@gnu.org>
8477
8478         * Makefile.am: Maintainer-clean Makefile.in.
8479         
8480         * Makefile.am: Fixed redundant EXTRA_DIST line.
8481
8482         * ascii.c: Comment fixes.
8483         (ascii_line_vert) Fixed overly aggressive range check.
8484
8485         * display.c: Removed dead code.
8486
8487         * list.q: Turn debugging on.
8488         (flush_table) New debug code.
8489
8490         * sfm-read.c: (read_value_labels) malloc's the structure before
8491         trying to assign to its members.
8492
8493         * sfm-write.c: Comment fix.
8494
8495         * som-high.c: (som_submit_table) Sets som.t and som.d on each call
8496         to output_table().
8497         (output_table) No arguments anymore--gets them through `som'
8498         global.  New debug code.  In crushed tables, now sets `htv' as
8499         well as `hv' to avoid bad confusion later.
8500         (dump_crush_page) New debug code.
8501
8502         * som-low.c: (som_dump_crush_page) New debug code.
8503
8504 Thu Mar 27 01:11:29 1997  Ben Pfaff  <blp@gnu.org>
8505
8506         All source files: Broke long lines into multiple lines.
8507         
8508         * ascii.c: (ascii_close_page) Uses host_system var in place of
8509         HOST_SYSTEM constant.
8510
8511         * cmdline.c: (var syntax_message[]) Broke into
8512         pre_syntax_message[] and post_syntax_message[].
8513         (usage) Outputs both parts, separated by driver list.
8514
8515         * error.h: Fixed broken formatting.
8516
8517         * expr-opt.c: (str_search, str_rsearch) New functions.
8518
8519         * misc.c: (blp_getdelim) Removed.  All references changed to
8520         `getdelim'.
8521         (str_search, str_rsearch) Removed.
8522         (memrmem) New function.
8523
8524         * misc.h: (blp_getline) Removed.  All reference changed to
8525         `getline'.
8526
8527         * stat.h: New file.
8528
8529         * filename.c: Includes "stat.h", not <sys/stat.h>.
8530         (blp_getenv) Uses host_system var instead of HOST_SYSTEM constant.
8531
8532         * output.c: (outp_list_classes) Changed output formatting.
8533
8534         * sfm-write.c: (write_header) Uses host_system var instead of
8535         HOST_SYSTEM constant.
8536         (write_rec_7_34) Extracts version numbers from the version string.
8537         Untested.
8538
8539         * sort.c: Includes "stat.h", not <sys/stat.h>.
8540
8541         * str.c: (strcasecmp) Removed.
8542
8543         * title.c: (cmd_document) Uses host_system var instead of
8544         HOST_SYSTEM constant.
8545
8546         * version.c: Generated on-the-fly by the Makefile instead of being
8547         static.
8548
8549         * str.h: Comment fixes.  Doesn't substitute for missing memmove or
8550         memcpy.
8551         [!HAVE_STRNCASECMP] Declares strncasecmp().
8552
8553         * version.h: Removed stray character.  Comment fixes.
8554         (vars host_system, build_system) New vars.
8555
8556 Mon Mar 24 21:47:31 1997  Ben Pfaff  <blp@gnu.org>
8557
8558         * Most source files: Changed formatting of copyright notice; fixed
8559         FSF address; reformatted to better conform to GNU standards;
8560         comment fixes.  Added markups to prevent GNU indent from messing
8561         up my beautiful formatting :-).
8562         
8563         * q2c.c: (get_line) Ignores lines that begin with `/* *INDENT' so
8564         that GNU indent markups can be passed through without problems.
8565
8566 Wed Feb 19 21:30:31 1997  Ben Pfaff  <blp@gnu.org>
8567
8568         * get.c: Turned off debugging.
8569
8570         * glob.c: (init_glob) Turned on save-file compression by default.
8571
8572         * sfm-write.c: (sfm_write_case) Fixed bug which resulted in less
8573         compression than was possible in save files.
8574
8575 Sun Feb 16 20:57:20 1997  Ben Pfaff  <blp@gnu.org>
8576
8577         * data-out.c: (convert_F) Comment fixes.  Debug message fixes.
8578
8579         * frequencies.q: Removed Fiasco extensions.  Updated calculation
8580         algorithms.  Polished output format. 
8581         (struct frq_info_struct) Removed members `max_degree', `min_n',
8582         all references removed.
8583         (macro frq_extensions) Removed.
8584         (static vars min_n, max_degree) Removed, all references removed.
8585         (internal_cmd_frequencies) Doesn't handle extensions.  Doesn't
8586         calculate `min_n', `max_degree'.
8587         (postcalc) Passes new arg to dump_statistics().
8588         (dump_full) Honor NOLABEL option.  Buggy?  Adds variable name
8589         title.
8590         (dump_condensed) Adds variable name title.
8591         (sum_freqs) Removed.
8592         (calc_stats) Updated calculation algorithm.
8593         (dump_statistics) Removed warning for too-few observations.
8594         Changed table formatting.  Adds variable name title if passed new
8595         arg is nonzero.
8596
8597         * output.h: Comment fix.
8598
8599         * recode.c, sample.c, sort.c: Disabled debug code.
8600
8601         * som-frnt.c: (som_set_value, som_set_float, som_set_text)
8602         Improved debug code.
8603
8604         * var.h: (enum series frq_*) Removed Fiasco extensions.
8605
8606 Sat Feb 15 21:26:53 1997  Ben Pfaff  <blp@gnu.org>
8607
8608         * command.c: Added PROCESS IF to command table.
8609
8610         * Lots & lots of places, removed checks for NULLs preceding calls
8611         to free_expression(), which itself checks.
8612
8613         * descript.q: Removed Fiasco extensions.  Removed optimizations
8614         for non-weighted active files.  Implemented some options.
8615         Finished polishing output format.  Comment fixes.  Merged
8616         `descript.g'.
8617         (static vars n_glob_miss_list, n_glob_valid, n_glob_missing,
8618         max_degree, min_n) Removed.
8619         (macro dsc_extensions) Removed.
8620         (struct dsc_info_struct) Removed `min_n' member, all references
8621         fixed.
8622         (internal_cmd_descriptives) Removed calculation of min_n,
8623         max_degree.  Only deals with one `calc' routine instead of two
8624         flavors.
8625         (precalc) Eliminated redundancy.  Updated for changes to
8626         descriptives_proc structure.
8627         (calc) Moved here from `descript.g'.  Rewritten to calculate
8628         statistics via `moments about the mean' rather than by summing,
8629         summing squares, summing cubes, and so on.
8630         (postcalc) Rewritten for new-style statistical calculation.
8631         (display) Removed support for displaying variables across rows.
8632         No longer crushes the descriptives table.  Removed ancient code.
8633         Added display of N, by variable and listwise.
8634
8635         * descript.g: Removed; merged into `descript.q'.
8636
8637         * expr-evl.c: (evaluate_expression) Now returns a double.  For
8638         numeric results, it returns the result as well as storing it in
8639         the passed `value' structure if non-NULL.  For string results it
8640         just returns 0.0 and it must be passed non-NULL.  Many references
8641         to this function were optimized by use of this change, especially
8642         but not exclusively in `compute.c'.
8643
8644         * frequencies.g: Comment fix.
8645
8646         * glob.c: (glob var process_if_expr) New global var.
8647
8648         * postscript.c: (static var option_tab[]) Corrected entry for
8649         `fixed_size'.
8650         (postopen) Sets x->size to x->prop_size.
8651         (ps_text_set_font_by_name) Sets font size as well as typeface for
8652         PROP and FIXED fonts.
8653         
8654         * sel-if.c: (cmd_process_if) New function.
8655
8656         * sfm-write.c: (struct sfm_fhuser_ext) New member `n_cases'.
8657         (sfm_write_dictionary) Sets `n_cases' to 0.
8658         (sfm_write_case) Increments `n_cases'.
8659         (sfm_close) Attempts to seek the system file back to the header
8660         and write the number of cases in its proper slot.
8661
8662         * som-frnt.c: (som_insert_table) Masks off expansion options since
8663         only SOPT_X_NORM seems to work sensibly.
8664
8665         * som-low.c: (get_cell_size) Fixed bug when a table cell was sized
8666         with a `fixed' value of 2.
8667
8668         * sort.c: (cmd_sort_cases) Cancels PROCESS IF.
8669
8670         * sysfile-info.c: (cmd_sysfile_info) Doesn't display more than 10
8671         value labels; uses SOPT_NONE instead of SOPT_X_BOTH.
8672
8673         * var.h: (enum series dsc_*) Removed Fiasco extensions.
8674         (struct descriptives_proc) Removed `miss_noweight'; new members
8675         `X_bar', `M2', `M3', `M4', `min', `max'.
8676
8677         * vars-atr.c: (discard_variables) Cancels PROCESS IF.
8678
8679         * vfm.c: (close_active_file) Cancels PROCESS IF.
8680         (write_case) Doesn't process cases unselected by PROCESS IF.
8681
8682 Fri Feb 14 23:32:58 1997  Ben Pfaff  <blp@gnu.org>
8683
8684         * glob.c: (glob var err) Removed.
8685
8686         * sysfile-info.c: (cmd_sysfile_info) When adjusting table size,
8687         doesn't have to take into account number of value labels since
8688         they're in a subtable anyway.  Also, doesn't display more than 10
8689         value labels since we can't yet break pages in subtables.
8690
8691 Tue Feb  4 15:15:50 1997  Ben Pfaff  <blp@gnu.org>
8692
8693         * som-frnt.c: (som_change_table_size) Simple change for elegance
8694         that shouldn't change behavior.
8695         (som_set_value) Comment fix.
8696
8697         * som-high.c: (som_submit_table) Message fix.
8698
8699 Wed Jan 22 21:54:00 1997  Ben Pfaff  <blp@gnu.org>
8700
8701         * command.c: Added SYSFILE INFO to command table.
8702
8703         * file-handle.q: (fh_handle_filename) New function.
8704
8705         * get.c: (save_trns_proc) Fixed a bug in padding of output data
8706         with spaces.
8707
8708         * main.c: (parse) New return value for command functions, -3.
8709
8710         * misc.h: Comment fix.
8711
8712         * output.h: Comment fixes.
8713         (macro COMPONENTS) Removed.
8714
8715         * postscript.c: (write_text) Modified literal_chars[] so that `('
8716         and ')' are not written to the output in strings as literals.
8717
8718         * sfm-read.c: (sfm_read_dictionary) New argument.
8719         (read_header) New argument.  Sets the information structure's
8720         values from the header information.  
8721         (read_variables) [__CHECKER__] Redefines isalnum()--some sort of
8722         bizarre Checker problem, I guess.
8723         (read_variables) Proper cleanup on lossage.
8724
8725         * sfm.h: (struct sfm_read_info) New struct for use by
8726         sfm_read_dictionary().
8727
8728         * som-frnt.c: (som_create_table) New argument CREATE_FLAGS,
8729         currently used just for tables that can be dynamically resized and
8730         thus have to be allocated with arena_malloc() instead of
8731         arena_alloc().  All references changed.
8732         (som_change_table_size) New function.
8733         (som_insert_table) Bugfix: now inserts `cell', not `c'!
8734
8735         * som-high.c: [GLOBAL_DEBUGGING] (check_table) Moved to som-low.c.
8736         (som_submit_table) [GLOBAL_DEBUGGING] Doesn't call check_table()
8737         any more.
8738
8739         * som-low.c: (draw_cell) Calls draw_table_cell() for SCON_TABLE
8740         cells.
8741         (draw_intersection) Now takes an argument specifying the table in
8742         question.  All references changed.
8743         (draw_table_cell) New function.
8744         (som_get_table_size) [GLOBAL_DEBUGGING] Calls check_table().
8745         (som_get_table_size) Many nice new explanatory comments.
8746         [GLOBAL_DEBUGGING] (check_table) Moved here from som-high.c.
8747
8748         * som.h: New enum series SOM_CREATE_* for use as create flags with
8749         som_create_table().
8750
8751         * str.h: Moved a comment here from TODO.
8752
8753         * sysfile-info.c: New file.  Reference implementation.
8754
8755 Sun Jan 19 14:22:11 1997  Ben Pfaff  <blp@gnu.org>
8756
8757         * command.c: Added RENAME VARIABLES to table of commands.
8758
8759         * data-in.c: (dls_error) Sets `cust_field'.
8760         (parse_N) Message fix.
8761         (parse_day_count) New function.
8762         (to_roman) Never outputs VX as a `short form' of V.
8763         (parse_month) Fixed parsing of Roman numerals.
8764         (parse_trailer) Message fix.
8765         (parse_DATE, parse_ADATE, parse_EDATE, parse_SDATE, parse_JDATE,
8766         parse_QYR, parse_MOYR, parse_WKYR, parse_DTIME) Issue a message if
8767         the date is invalid.
8768         (parse_SDATE) Fixed swapped day, year.
8769         (parse_JDATE) Fixed bug for dates in 1582.
8770         (parse_DTIME) Allows days not between 1 and 31.
8771         (parse_numeric) Makes local copy of f.type for easier usage.
8772         FMT_DOLLAR fixed.
8773
8774         * data-out.c: (convert_F) When outputting as scientific, properly
8775         sets f.type as fp->type.
8776         (insert_commas) Fixed operator precedence problem with setting of
8777         nitems.  Changed strcpy to memcpy (no null terminator). 
8778         (convert_date) Fixed FMT_JDATE: added 1900 to year.
8779         (convert_CCx) Essentially rewritten, but now it works.
8780
8781         * display.c: (cmd_display) Added DISPLAY FILE LABEL (undocumented
8782         feature of Fiasco).
8783         (display_documents) Implemented.
8784
8785         * error.c: (glob var cust_field) New var.
8786         (vmsg) Displays cust_field as part of message classes DE and DW.
8787
8788         * formats.c: (debug_print) Fixed to compile under updated
8789         dictionary format.
8790
8791         * get.c: (cmd_get, cmd_save_internal) Close file handle on
8792         failure.
8793
8794         * misc.c: (parse_format_specifier) Formatting fix.
8795
8796         * modify-vars.c: (struct var_modification) Renamed `n_reorder' as
8797         `n_rename' for clarity.
8798         (cmd_modify_vars) Initializes `forward' and `positional' at
8799         appropriate times.  Frees lists of vars to rename on failure.
8800         Comment fix.  Frees memory on success.  
8801         (rearrange_dict) Simplified `for' loop condition.
8802
8803         * rename-vars.c: New file (reference implementation).
8804         
8805         * set.q: (internal_cmd_set) Fixed `emu' test condition.
8806
8807         * sfm-read.c: (read_header) File label is created only if file
8808         label in file is not blank.
8809         (read_variables) Initializes `dict' local variable.
8810         (read_documents) Proper behavior on lossage.
8811
8812         * sfm-write.c: (write_header) Doesn't blank out the file label
8813         (why was this here to begin with?!)
8814
8815         * temporary.c: (save_dictionary) File label is copied only if
8816         non-NULL.  Doesn't try to xstrdup() dictionary documents.
8817         Adapted so as to not irritate Checker.
8818         (free_dictionary) Only destroys var_by_name if non-NULL.
8819
8820         * title.c: (cmd_file_label) Doesn't skip FILE, LABEL tokens.
8821         (cmd_document) Doesn't skip DOCUMENT token.  Adds some header
8822         lines to the document, indents the document.  Also, it works now.
8823         (add_document_line) New function.
8824
8825         * var.h: (struct dictionary) Reordering.
8826
8827         * vars-prs.c: (parse_variables) On lossage, only local_free()'s
8828         bits if it was allocated to begin with.
8829
8830 Thu Jan 16 13:08:57 1997  Ben Pfaff  <blp@gnu.org>
8831
8832         * command.c: Added MODIFY VARS to list of commands.
8833
8834         * configure.in: Updated custom macros for autoconf 2.12.  Removed
8835         mmap reference; fixed termcap library reference.
8836
8837         * display.c: (display_variables) Fixed a few bugs although it's
8838         still not well written.
8839
8840         * error.c: [!__CHECKER__] (chkr_disp_call_chain) New function.
8841         (induce_segfault) Calls chkr_disp_call_chain() instead of
8842         inducing an actual SIGSEGV.
8843
8844         * expr-opt.c: (evaluate_tree) Swapped order of arguments to
8845         str_search() and str_rsearch().  Fixed tests for matches on
8846         OP_INDEX and OP_RINDEX.
8847
8848         * filename.c: (good_getcwd) Removed as the new libc for Checker
8849         doesn't contain this bug, apparently.
8850
8851         * misc.c: (str_search, str_rsearch) Changed order of arguments for
8852         consistency with GNU memmem.
8853         (blp_getdelim) Changed `len' from `int' to `size_t'.
8854
8855         * modify-vars.c: Reference implementation.
8856
8857         * som-frnt.c: (zero_length) New global var.
8858         (som_create_table) Message fix.
8859
8860         * som.h: Added gcc attributions to som_set_text(),
8861         som_output_text() prototypes.  blank_line() refers to
8862         zero_length[] instead of a literal null string to suppress gcc
8863         warnings.
8864
8865         * sort.c: (do_external_sort) Fixed fencepost error on lossage.
8866         (allocate_cases) Decrements x_max so the last element of x[] can
8867         be used by the algorithm.
8868
8869         * var.h: Changed minor details of `variable' declaration.  
8870         (struct modify_vars_proc) New struct.
8871         (struct variable) Added field p.mfv.
8872
8873         * vars-atr.c: Comment fix.
8874
8875         * vars-prs.c: (fill_all_vars) More optimal implementation.
8876
8877         * vfm.c: (dump_splits) Sets the last byte of temp_buf to a null
8878         character, which it shouldn't have to do but printf() seems to
8879         read the null byte even though I supply a maximum length...
8880
8881 Fri Jan 10 20:22:08 1997  Ben Pfaff  <blp@gnu.org>
8882
8883         * command.c: Removed command alias X for QUIT.
8884         (parse_cmd) Fixed comment parsing.
8885
8886         * dfm.c: (struct dfm_fhuser_ext) Fields `len', `size' are now of
8887         type size_t.
8888         (read_record) Fixed references to len, size.
8889         (dfm_get_record) Restructured.
8890
8891         * file-handle.h: (struct file_handle) Field `lrecl' now of type
8892         size_t.
8893
8894         * file-handle.q: (internal_cmd_file_handle) Checks for nonpositive
8895         record length.
8896
8897         * modify-vars.c: New file.  Not complete.
8898         
8899         * set.q: (set_ccx) Fixed operator precedence problem regarding ^
8900         and ==.
8901
8902         * sfm-read.c: (bswap_flt64, read_header, write_variable) Fixed
8903         problems caused by int/size_t differences.
8904
8905         * sort.c: (output_record, merge_once) Cast `size_t's to `int's in
8906         appropriate spots.
8907
8908         * str.c: (strcasecmp) Fixed bug that cropped up when the strings
8909         being compared were of equal length.
8910
8911 Thu Jan  2 19:08:23 1997  Ben Pfaff  <blp@gnu.org>
8912
8913         * command.c: Added DOCUMENT, DROP DOCUMENTS, FILE LABEL.
8914
8915         * lexer.c: (get_dotted_rest_of_line) New function.
8916
8917         * sel-if.c: (cmd_filter) Cannot choose string or scratch variables
8918         as filters.
8919
8920         * sfm-read.c: (sfm_read_dictionary) Calls read_documents() to read
8921         type 6 records.  Frees the dictionary properly.
8922         (read_header) Initializes the dictionary instead of letting
8923         read_variables() do it.  Sets the dictionary file label from the
8924         system file.
8925         (read_documents) New function.
8926
8927         * sfm-write.c: (sfm_write_dictionary) Calls write_documents() to
8928         write type 6 record if appropriate.
8929         (write_header) Writes file label from dictionary.
8930         (write_documents) New function.
8931
8932         * temporary.c: (save_dictionary, restore_dictionary,
8933         free_dictionary) Properly handle new fields in dictionary struct.
8934
8935         * title.c: (get_title) Returns after failure().
8936         (cmd_file_label, cmd_document, cmd_drop_documents) New functions
8937         for new commands FILE LABEL, DOCUMENT, DROP DOCUMENTS.  Untested.
8938
8939         * var.h: (struct dictionary) New fields `label', `n_documents',
8940         `documents'.
8941
8942 Wed Jan  1 22:08:10 1997  Ben Pfaff  <blp@gnu.org>
8943
8944         * command.c: Added FILTER to list of commands.
8945
8946         * frequencies.g: [WEIGHTING] Removed test for weighting!=-1 since
8947         it's always true.
8948
8949         * get.c: (cmd_save_internal) Removed weighting code since it's now
8950         handled by sfm-write.c.  Properly commented out debug code.
8951
8952         * glob.c: (glob var weighting) Removed.
8953
8954         * sel-if.c: Comment fixes.
8955         (cmd_filter) New function.
8956
8957         * sfm-read.c: (struct sfm_fhuser_ext) New field `weight_index'.
8958         (sfm_read_dictionary) Sets weighting variable direct in the
8959         created dictionary now.  (Apparently we previously didn't support
8960         weighting on GET?)
8961         (read_header) Sets weight_index field in sfm_fhuser_ext from
8962         header read from disk.
8963
8964         * sfm-write.c: (sfm_write_dictionary) Comment fix.
8965         (write_header) Now sets the weighting in the header from the
8966         passed primary dictionary instead of from the sfm_write_info.
8967
8968         * sfm.h: (struct sfm_write_info) Removed field `weight'.
8969
8970         * som-high.c: (dump_crush_table) Fixed a couple of assertions that
8971         broke on boundary conditions.
8972
8973         * var.h: (struct dictionary) New fields `weight_var',
8974         `weight_index', and `filter_var'.
8975         (glob var weighting) Removed.  This is now part of struct
8976         dictionary.  All references changed; the less mechanical changes
8977         are described above.
8978
8979         * vars-atr.c: (find_dict_variable) New function.
8980
8981         * vfm.c: (static var filter_index) New variable.
8982         (open_active_file) Initializes filter_index from default_dict.
8983         (write_case) Calls proc_func() only if the filter variable is
8984         nonzero; this implements FILTER behavior.
8985
8986         * weight.c: (static var weight_varname) Removed.
8987         (cmd_weight) Modified default_dict instead of glob vars.
8988         (update_weighting) Changed the signature to modify a dictionary
8989         instead of glob vars.  Now returns the weighting variable.
8990         (get_weighting_variable) Removed; its function is absorbed by
8991         update_weighting().
8992         (stop_weighting) Operates on a dictionary now.
8993
8994 Wed Jan  1 17:00:59 1997  Ben Pfaff  <blp@gnu.org>
8995
8996         * sort.c: Removed debugging info from messages.
8997         (do_external_sort) Cleans up after itself by deleting the
8998         temporary directory on failure.  (On success it is deleted by the
8999         input program.)
9000         (allocate_cases) Removed debug code.  Added clean up code.
9001         (output_record) Removed debug code.
9002         (merge) Added code to close all the input files that are currently
9003         open.  This is a likely location for bugs, because I'm not sure
9004         about boundary conditions.  Removed an unnecesary heap_delete().
9005         (merge_once) Removed input file "optimization" that in fact
9006         screwed up the rest of the code.  Message and comment fixes.
9007
9008 Sun Dec 29 21:36:48 1996  Ben Pfaff  <blp@gnu.org>
9009
9010         * error.c: [__CHECKER__] (induce_segfault) Flushes output streams.
9011
9012         * heap.c: (heap_delete) New argument.
9013
9014         * sort.c: Finished implementation of external sort.
9015
9016         * vfm.c: (read_from_disk) Returns after a disk error.
9017
9018 Sun Dec 22 23:10:39 1996  Ben Pfaff  <blp@gnu.org>
9019
9020         * sort.c: (static var state) Removed.
9021         (static vars max_handles, tmp_basename, tmp_extname,
9022         huffman_queue) New variables.
9023         (do_external_sort) Moved most code to new functions.
9024         Creates huffman_queue.
9025         (allocate_file_handles, allocate_cases) New functions.
9026         (static vars run_no, run_length, file_index, case_count) New
9027         variables. 
9028         (output_record) Returns success.  Now really writes to the output
9029         file.
9030         (begin_run, end_run) New functions.
9031         (write_initial_runs) Returns success.  Initializes run_no to -1.
9032         Calls begin_run(), end_run() at appropriate times.  Outputs debug
9033         messages.
9034         (write_to_sort_cases) Calls begin_run(), end_run() at appropriate
9035         times.
9036         (merge) New function.
9037
9038         * heap.c, heap.h: New files.  Hopefully in near-final form.
9039
9040 Sat Dec 21 21:51:04 1996  Ben Pfaff  <blp@gnu.org>
9041
9042         * glob.c: Added write_active_file to global vars.
9043
9044         * sort.c: Several new miscellaneous static variables.
9045         (cmd_sort_cases) Big comment fix.
9046         (perform_case_2) Renamed `do_external_sort' and completely
9047         rewritten.
9048         (case_2_proc_func) Removed.
9049         (output_record, write_initial_runs, write_to_sort_cases,
9050         compare_record) New functions.
9051
9052         * vfm.c: [DEBUGGING] (index_to_varname) Excised bit rot.
9053
9054 Tue Dec 17 18:57:59 1996  Ben Pfaff  <blp@gnu.org>
9055
9056         * sort.c: (perform_case_2) Changed the method for allocation of
9057         lots of memory--now allocates one case at a time in hopes that
9058         more cases can be allocated with heavily fragmented memory.
9059
9060         * var.h: (write_active_file) New global var.
9061
9062         * vfm.c: (procedure, close_active_file, write_case,
9063         SPLIT_FILE_procfunc) Now allow beginfunc, procfunc, and endfunc
9064         arguments to procedure() to be NULL.  All references to
9065         procedure() that made use of dummy functions were changed to NULL
9066         functions.
9067         (open_active_file) If write_active_file is non-NULL, the output
9068         device becomes DEV_PGM (a new enum).
9069         (close_active_file) Sets write_active_file to NULL.
9070         (read_from_memory) Comment fix.
9071         (record_case) Calls write_active_file() when the output device is
9072         DEV_PGM.
9073
9074 Sun Dec 15 15:32:16 1996  Ben Pfaff  <blp@gnu.org>
9075
9076         * sort.c: New file.
9077
9078         * autorecode.c: (cmd_autorecode) Fixed parsing of options.
9079         Fixed checking for duplicate varnames.
9080         (recode) xmalloc()'s the transformation instead of arena_alloc()'ing
9081         it.
9082         (autorecode_trns_free) Destroys hash tables for each recoding
9083         specification.
9084         (autorecode_proc_func) Compares NULL to *vpp instead of vpp.
9085
9086         * command.c: Added SORT CASES to cmd_table.
9087         (null_func, null_int_func) Prototyped.
9088
9089         * descript.g: (calc_weight, calc_noweight) Computes own case
9090         number now.
9091         
9092         * frequencies.q: (dump_statistics) Fixed problem with
9093         too-few-cases warning message.
9094
9095         * get.c: (cmd_save_internal) Handles weighting properly.
9096
9097         * hash.c: (hsh_dump) Output format changed.
9098         (force_hsh_insert) Actually works now, prototype changed.
9099
9100         * list.q: (static var case_num) New variable.
9101         (cmd_list) Initializes case_num.
9102         (list_cases) Increments case_num.
9103
9104         * var.h: Added definitions for SORT CASES.  Comment fixes.
9105
9106         * vfm.c: Some definitions moved to new file vfmP.h.  Comment
9107         fixes.  `active' renamed vfm_active, `rep' renamed
9108         vfm_replacement, all references changed.
9109         (procedure) The procfunc no longer receives a case number.  All
9110         references changed.
9111         (write_case) Subtle reordering.
9112         (SPLIT_FILE_procfunc) Counts cases differently.  Slightly less
9113         redundant.
9114
9115         * weight.c: (get_weighting_variable) New function.
9116
9117         * vfmP.h: New file with definitions from vfm.c.
9118
9119 Sat Dec 14 10:35:30 1996  Ben Pfaff  <blp@gnu.org>
9120
9121         * command.c: (FILE_TYPE_okay) Commented out some tests because
9122         they're clumsy and not yet needed.
9123
9124         * var.h: Most *_trns structures moved to their respective source
9125         files.  Some were moved into a new file, do-ifP.h.  Comment fixes.
9126         (union any_trns) Changed to a typedef for trns_header.
9127         (struct input_program_pgm) Removed.
9128
9129         * vars-prs.c: (parse_variables) Only local_free()'s bits if it
9130         was allocated in the first place.
9131
9132 Fri Dec 13 21:30:53 1996  Ben Pfaff  <blp@gnu.org>
9133
9134         * autorecode.c: New file.
9135         
9136         * command.c: Added AUTORECODE to command table; re-enabled SET.
9137
9138         * data-out.c: (convert_F) Handles infinities and NaNs properly.
9139
9140         * error.c: (vmsg) Comment fixes.
9141
9142         * hash.c: Comment fix.
9143         (hashpjw_d) New function.
9144         (hashpjw) Reimplemented as call to more general function
9145         hashpjw_d().
9146         (internal_comparison_fn) Initializes pointers properly.
9147         (hsh_sort) [GLOBAL_DEBUGGING] New debugging code.
9148         (force_hsh_insert, force_hsh_find) New debugging wrapper
9149         functions.
9150
9151         * main.c: (main) Message fix.
9152
9153         * output.c: (outp_read_devices) Message fix.
9154
9155         * set.q: Comment fixes.
9156         (custom_results) Implemented Wnd/X form of subcommand.
9157         (set_routing) New function.
9158         (internal_cmd_set) Implemented ERRORS, MESSAGES.
9159
9160         * settings.h: (SET_ROUTE_*) New enum series.
9161         (set_results) Renamed set_results_file, all references changed.
9162         (set_messages) Removed.
9163         (glob vars set_errors, set_messages, set_results) New vars.
9164
9165         * title.c: (get_title) Remembers to xstrdup() the result of
9166         get_rest_of_line().
9167
9168         * var.h: (arc_item, arc_spec, autorecode_trns) New structures for
9169         use by AUTORECODE.
9170         (union any_trns) New element `arc'.
9171
9172 Fri Dec  6 23:53:47 1996  Ben Pfaff  <blp@gnu.org>
9173
9174         * command.c: (output_line) Removed references to set_screen.
9175
9176         * error.c: (static var terminating) New var.
9177         (hcf) Sets terminating to 1.
9178         (vmsg) If terminating is nonzero, does not attempt to call hcf().
9179         This prevents an infinite loop if an error occurs within hcf().
9180
9181         * expr-evl.c: (evaluate_expression) [__CHECKER__] Replaced case
9182         statement circumlocution with `case 42000' trick.
9183         (evaluate_expression) New support for OP_STR_MIS.
9184
9185         * expr-opt.c: (evaluate_expression) [__CHECKER__] Replaced case
9186         statement circumlocution with `case 42000' trick.
9187         (dump_node) Handles OP_STR_MIS.
9188
9189         * expr-prs.c: (MISSING_func, SYSMIS_func) Rewrote to handle string
9190         variables exceptions.
9191         (parse_function) Message fix.
9192         (ops[]) Added OP_STR_MIS.
9193
9194         * expr.h: Added OP_STR_MIS to OP_* enum.  Comment fixes.
9195
9196         * exprP.h: [__CHECKER__] Removed case statement circumlocution.
9197
9198         * glob.c: Removed set_scrnfile glob var.
9199         (init_glob) set_errorbreak set to 0 by default.
9200
9201         * groff-font.c: Changed included files.
9202         (groff_read_font) Initializes font_arena local var correctly.
9203         (default_font) New function.
9204
9205         * output.c: Comment fixes.
9206         (glob var disabled_devices) New variable.
9207         [GLOBAL_DEBUGGING] (static var iterating_driver_list) New
9208         variable.
9209         [GLOBAL_DEBUGGING] (reentrancy) New function.
9210         [GLOBAL_DEBUGGING] (outp_read_devices, outp_done, find_driver,
9211         outp_iterate_enabled_drivers) Calls to reentrancy().
9212         (destroy_list) New function.
9213         (outp_done) Moved code to destroy_list().
9214         (parse_options) Parses `listing', `screen', `printer' options
9215         internally.
9216         (configure_driver) Sets new `device' member of driver.
9217         (outp_iterate_enabled_drivers, outp_enable_device) New functions.
9218
9219         * output.h: Comment fixes.  New enum series OUTP_DEV_*.
9220         (struct outp_driver_struct) New member `device'.
9221
9222         * postscript.c: (find_encoding_file) Doesn't display its own error
9223         messages.
9224         (default_encoding) New function.
9225         (switch_font) Calls default_encoding() if no encoding can be
9226         found.
9227         (text) Makes up a character metric if none exists for the desired
9228         character.
9229         (load_font) Properly copies a fallback filename.  Calls
9230         default_font() for a font if none at all are known.
9231
9232         * set.q: Comment fixes.  Removed OUTPUT subcommand.
9233         (custom_listing) Calls outp_enable_device() to enable/disable
9234         listing device.
9235         (turn_screen_on) Removed.
9236         (internal_cmd_set) Calls outp_enable_device() to enable/disable
9237         screen, printer devices.
9238
9239         * settings.h: Comment fixes.
9240         (glob vars set_output, set_printer, set_screen, set_scrnfile)
9241         Removed.
9242
9243         * som-high.c: (som_submit_table, som_eject_page) Use
9244         outp_iterate_enabled_drivers() instead of iterating
9245         outp_driver_list directly.
9246
9247 Wed Dec  4 21:34:17 1996  Ben Pfaff  <blp@gnu.org>
9248
9249         * data-in.c: (parse_EDATE, parse_SDATE) New functions.
9250         (parse_string_as_format) Handles new formats.
9251         (parse_numeric) Now handles DOT and PCT formats.
9252
9253         * data-out.c: (convert_E, convert_F, insert_commas) Handle DOT
9254         format now.
9255         (convert_date) Handle EDATE and SDATE formats.
9256         (convert_CCx) Now if there's not room for the currency characters,
9257         converts it as F format if it's positive instead of giving up
9258         quickly.  Also fixed save-and-restore bug with decimal point
9259         characters.  
9260         (convert_format_to_string) Handles new formats.
9261
9262         * misc.c: (formats[]) Added new formats.
9263         (convert_fmt_ItoO) Supports new formats.
9264
9265         * sfm-read.c: (parse_format_spec) Supports new formats.  Better
9266         data checking.  New argument, all references changed.
9267
9268         * sfm-write.c: (write_format_spec) Supports new formats.
9269
9270         * var.h: New formats FMT_DOT, FMT_PCT, FMT_EDATE, FMT_SDATE.
9271         Comment fixes.
9272
9273 Sun Dec  1 17:19:00 1996  Ben Pfaff  <blp@gnu.org>
9274
9275         * cmdline.c: Comment fixes.
9276         (parse_command_line) Changed return type to void.
9277
9278         * data-in.c: (parse_string_as_format) Added FMT_CCA...FMT_CCE to
9279         switch.
9280         (parse_numeric) Handles international numbers (comma as decimal
9281         point).  Some reformatting.
9282
9283         * data-list.c: (parse_free) Default output format is now
9284         set_format instead of hard-coded F8.2.
9285         (read_from_data_list_list) Emits error message on undefined data
9286         only if set_undefined is nonzero.
9287
9288         * data-out.c: (convert_E) Changes decimal point from period to
9289         comma if appropriate.  Restructured.  Better comments.
9290         (convert_F) Changes decimal point from period to comma if
9291         appropriate.
9292         (insert_commas) Major bug with handling of negative values fixed.
9293         Also, inserts periods instead of commas if appropriate.
9294         (convert_CCx) New function.
9295         (convert_format_to_string) Added FMT_CCA...FMT_CCE to switch.
9296         (num_to_string) Changed `.' to set_decimal.
9297
9298         * dfm.c: Comment fixes.
9299         (dfm_close) Frees ext->line even in inline_file.
9300         (open_inline_file) New function.
9301         (open_file_r) When opening the inline file: now properly
9302         recognizes `BEGIN DATA.' line, and calls open_inline_file() to
9303         finish up.
9304         (read_record) Calls fh_close_handle() instead of dfm_close() to
9305         close the inline file.  Makes a copy of the line getl_buf to avoid
9306         interlock problems.
9307         (dfm_get_record) Restructured.  Now checks the return value of
9308         open_file_r().
9309         (cmd_begin_data) Moved open code into open_inline_file().  Relaxed
9310         checking for use of inline file.  No longer tries to close inline
9311         file.
9312
9313         * error.c: (glob var error_already_flagged) New var.
9314         (vmsg) Message change.  Now checks max number of errors/warnings,
9315         acts on it.
9316
9317         * file-handle.q: (fh_handle_name) Now allows closing of
9318         inline_file.
9319         (fh_init_files) Reformatted.
9320
9321         * get.c: (trim_dictionary) Checks SCOMP option instead of COMP.
9322
9323         * getline.c: (getl_include) Fixed bug that popped up when called
9324         when file queue was empty.
9325         (read_console) Resets error_count, warning_count,
9326         error_already_flagged to zero.
9327
9328         * glob.c: Many changes to update list of variables.
9329         (init_compat_dependent) Now this function is called whenever
9330         `compat' changes.  It now sets set_seed only if it hasn't
9331         previously been referenced.  It now calls
9332         lex_init_compat_dependent().
9333
9334         * include.c: (cmd_include_at) Frees temporary buffer instead of
9335         line buffer.  
9336         (cmd_include) Doesn't make copy of include file name.
9337
9338         * lexer.c: Comment fixes.
9339         (init_lex) Moved some code into new function
9340         lex_init_compat_dependent().
9341         (lex_init_compat_dependent) New function.
9342         (hex_val) Simplified.
9343         (preprocess_line) Uses set_endcmd instead of hardcoding `.'.
9344
9345         * main.c: Comment fixes.
9346         (main) Reformatted.
9347
9348         * misc.c: (formats[]) Added FMT_CCA...FMT_CCE.
9349         (check_input_specifier) Disallows FMT_CCA...FMT_CCE.
9350         (convert_fmt_ItoO) Detects FMT_CCA...FMT_CCE.
9351         (setup_randomize) Sets set_seed_used.
9352
9353         * set.q: Comment fixes.
9354         (custom_results) Conditionalizes on `compat'.
9355         (custom_log) Calls custom_journal().
9356         (set_ccx) New function.
9357         (cmd_set) Calls init_compat_dependent() when `compat' changes.
9358         Calls set_ccx() to handle CCA...CCE.  Sets set_grouping
9359         when set_decimal changes.  Range-checks values for MITERATE,
9360         MNEST.  Message fixes.
9361
9362         * settings.h: Comment fixes.
9363         (struct set_cust_currency) New struct.
9364         (set_cc[], set_grouping, set_seed_used) New global vars.
9365
9366         * var.h: (FMT_CCA...FMT_CCE) New output formats.
9367         (FCAT_OUTPUT_ONLY) New FCAT_* constant.
9368
9369 Thu Nov 28 23:14:07 1996  Ben Pfaff  <blp@gnu.org>
9370
9371         * glob.c: Revised variables to correspond to settings.h.
9372         (init_glob) Initializes variables from settings.h properly.
9373
9374         * set.q: Began long-overdue major revision to correspond to new
9375         philosophy.  Most code changed. 
9376
9377         * settings.h: Mostly changed; reorganized, reordered, large new
9378         comment.
9379
9380 Thu Nov 28 19:46:10 1996  Ben Pfaff  <blp@gnu.org>
9381
9382         * get.c: (cmd_save_internal) No longer forces compression off.
9383
9384         * sfm-read.c: (read_compressed_data) If eof is reached when
9385         reading a new instruction octet, only signal error if we're in the
9386         middle of a case.
9387
9388         * sfm-write.c: (COMPRESSION_BIAS) New #define.
9389         (struct sfm_fhuser_ext) New member `end'.
9390         (write_header) Refers to COMPRESSION_BIAS instead of magic 100.0.
9391         (ensure_buf_space) New function.
9392         (sfm_write_case) Reimplemented in order to support compression.
9393         (sfm_close) Writes out the remaining contents of the compression
9394         buffer if any.
9395
9396 Wed Nov 27 23:18:35 1996  Ben Pfaff  <blp@gnu.org>
9397
9398         * command.c: Defined SAVE and XSAVE commands in command table.
9399
9400         * common.h: second_lowest_value is of type flt64, not double.
9401
9402         * file-handle.h: Comment fix.
9403
9404         * get.c: Comment fixes.
9405         (static var `trns') New.
9406         (save_write_case_func, save_trns_proc, save_trns_free, null_func,
9407         cmd_save_internal, cmd_save, cmd_xsave) New functions.
9408         (dict_delete_run) Clears the variables and frees them now.
9409         (trim_dictionary) Sets default for compression.
9410         On KEEP subcommand, frees deleted variables as well as clearing
9411         them.  Finally got the sense of the test for deleting all
9412         variables correct.
9413         [DEBUGGING] (dump_dict_variables) Message fix.
9414
9415         * glob.c: (init_glob) set_compression set to 1 by default.
9416
9417         * list.q: Properly #includes config.h.
9418
9419         * misc.h: New macro REM_RND_UP.
9420
9421         * settings.h: Comment fix.
9422
9423         * sfm-read.c: (structs sysfile_header, sysfile_format,
9424         sysfile_variable; inline function bswap_int32) Moved to new file
9425         sfmP.h.
9426         (corrupt_msg) [__CHECKER__] No longer induces segfault.
9427         (sfm_read_dictionary) Fixed bug caused by failing to initialize
9428         var_by_index.
9429         (read_machine_flt64_info) Fixed some problems caused by confusion
9430         between flt64 and double types.
9431         (read_header) Message fix.
9432         (read_variables) Fixed set of cases in which we byte-swap sv.print
9433         and sv.write.  Fixed confusion of flt64 and double.
9434
9435         * sfm.h: (struct sfm_write_info) New.
9436
9437         * som-high.c: (som_draw_title) Properly frees `s'.
9438
9439         * temporary.c: (save_dictionary) Comment fix.
9440
9441         * var.h: Comment fixes.  New FMT_* enum, FMT_NUMBER_OF_FORMATS.
9442         (struct trns_header) Formatting fix.
9443         (struct save_trns) New.
9444
9445         * vars-atr.c: (discard_variables) Comment fix.
9446
9447         * sfm-write.c: New file, baseline release.
9448
9449         * sfmP.h: New file, baseline release.
9450
9451 Sun Nov 24 14:53:53 1996  Ben Pfaff  <blp@gnu.org>
9452
9453         * cmdline.c: (parse_command_line) `--version' output updated.
9454         (glob var syntax_message[]) Added my e-mail address.
9455
9456         * file-handle.q, lexer.c, vfm.c: Changed many instances of
9457         `illegal' to `invalid'.
9458
9459         * sfm-read.c: (struct sfm_fhuser_ext) New fields used as
9460         uncompression buffer.
9461         (sfm_close) Frees decompression buffer.
9462         (sfm_read_dictionary) Initializes decompression buffer.
9463         (buffer_input, read_compressed_data) New functions.
9464         (sfm_read_case) Restructured; now calls read_compressed_data() to
9465         handle compressed system file data.
9466
9467         * var.h: Comment fix.
9468
9469 Mon Nov 11 15:34:09 1996  Ben Pfaff  <blp@gnu.org>
9470
9471         * dfm.c: (dfm_close) Does not set h->{ext,class} because the
9472         caller handles it.
9473          
9474         * get.c: New comments.  New static var `get_file'.
9475         (cmd_get) Now fully implemented.  Calls discard_variables();
9476         initializes fv and lv for all variables; new debug code; sets
9477         up the dictionary; sets up the input program.
9478         (read_from_get, cancel_get) New functions.
9479
9480         * sfm-read.c: Comment fixes.
9481         (sfm_close) New static function.
9482         (sfm_read_dictionary) Properly sets up the class of the
9483         file_handle.  No longer cares what size the data is in records of
9484         type 7.  Also, on failure, properly cleans up the file_handle and
9485         free()s some stuff.
9486         (read_variables) No longer thinks it knows `nval' of the
9487         dictionary.  Now sets p.get.fv, etc., instead of speculatively
9488         setting fv itself.
9489         (read_value_labels) Fixed off-by-one error in indexing of
9490         var_by_index[].
9491         (sfm_read_case) New function.
9492         (sfm_r_class) New static var.
9493
9494         * var.h: (get_proc) New struct.
9495         (struct variable) New member p.get.
9496
9497 Thu Nov  7 20:52:28 1996  Ben Pfaff  <blp@gnu.org>
9498
9499         * get.c: Removed GTSV_OPT_MAP because of a misinterpretation of
9500         the manual's meaning.
9501         (rename_variables) New function.
9502         (trim_variables) Doesn't try to parse MAP any more.  Removed debug
9503         code.  Now properly reorders the dictionary on the KEEP keyword.
9504
9505         * sfm-read.c: (read_value_labels) Fixed some bugs regarding
9506         garbage collection.
9507
9508         * vars-atr.c: (clear_variable) New argument `dictionary *'.
9509         (rename_variable) New function.
9510         (free_val_lab) Reformatted.
9511
9512 Thu Nov  7 17:29:16 1996  Ben Pfaff  <blp@gnu.org>
9513
9514         * var.h: Reindented entire file.  Comment fixes.
9515         (glob vars var, var_by_name, nvar, N, nval, n_splits, splits)
9516         Removed.
9517         (glob var default_dict) New.
9518         (struct indirect_dictionary) Removed.
9519
9520         * Many other source files were changed to add `default_dict.'
9521         before all references to the dictionary of the active file.
9522         
9523         * vars-atr.c: (make_indirect_dictionary) Removed.
9524
9525         * glob.c: Reindented all variable declarations.  Updated for
9526         changed var.h.  Comment fixes.
9527
9528         * temporary.c: (restore_dictionary, save_dictionary) Simplified
9529         because now we can mainly copy dictionary structs.
9530
9531         * vars-prs.c: (is_dict_varname, parse_dict_variable,
9532         parse_variables) Takes dictionary instead of indirect_dictionary
9533         first argument.
9534         (parse_variables) Instead of calling make_indirect_dictionary,
9535         just sets DICT to &default_dict if DICT is NULL.  Of course, lots
9536         of `*dict.' references had to be changed to `dict->'.  Removed
9537         debug code.
9538
9539 Thu Nov  7 15:48:52 1996  Ben Pfaff  <blp@gnu.org>
9540
9541         * get.c: Added GTSV_OPT_* series of enums.
9542         (trim_dictionary, dict_delete_run) New functions.
9543         [DEBUGGING] (dump_dict_variables) New function.
9544         (cmd_get) Calls trim_dictionary() to get dictionary fully set-up.
9545         [DEBUGGING] Calls dump_dict_variables() to display results.
9546
9547         * glob.c: (cmp_variable) Now a public function declared in var.h.
9548
9549         * sfm-read.c: Turned off debug code.  Comment fixes.
9550         (read_machine_int32_info, read_machine_flt64_info) New functions
9551         to parse type 7 records.
9552         (sfm_read_dictionary) Properly byteswaps several fields now.
9553         Calls read_machine_*_info() to parse type 7 subtypes 3 and 4
9554         records.  [DEBUGGING] Dumps dictionary.
9555         (read_variables) Sets `index' field of variables created properly.
9556         Constructs avl tree of variables in dictionary.  [DEBUGGING] No
9557         longer dumps dictionary.
9558         (read_value_labels) Properly byteswaps fields.  [DEBUGGING] New
9559         debug code.
9560         [DEBUGGING] (dump_dictionary) No longer stubbed out.
9561
9562         * temporary.c: (restore_dictionary) Destroys `var_by_name' glob
9563         var before destroying any variables just to save a little time.
9564
9565         * var.h: (struct variable) Reordered in order to make name[] the
9566         first member; this makes pointers to `variable' pointers to the
9567         variable name, simplifying avl trees, etc.
9568         (struct indirect_dictionary) New struct.
9569
9570         * vars-atr.c: (find_variable) Rewritten for efficiency.
9571         (make_indirect_dictionary, is_dict_varname, parse_dict_variable)
9572         New functions.
9573         (is_varname) Rewritten for efficiency.
9574         (parse_variables) New argument, which is a `dictionary *'.  All
9575         references changed.  This function now reads variable names from
9576         the dictionary passed, or from the default dictionary if NULL.
9577
9578 Tue Nov  5 18:34:59 1996  Ben Pfaff  <blp@gnu.org>
9579
9580         * misc.h: Added new macro DIV_RND_UP to perform integer division,
9581         rounding up.  Changed many references to ROUND_UP to use this
9582         instead.
9583
9584         * sfm-read.c: Includes avl.h.
9585         (corrupt_msg) Induces a segfault under Checker.
9586         (macro assertive_bufread) New.  Many references to bufread() now
9587         use this instead.
9588         (sfm_read_dictionary) Split up into several functions.  Added code
9589         to read dictionary records following the the type 2 records.  Not
9590         quite complete.  New variable `var_by_index'.
9591         (read_header, read_variables) New functions extracted from
9592         sfm_read_dictionary().
9593         (read_value_labels) New function.
9594         (bufread) Checks ferror() if fread() doesn't return the expected
9595         value; if ferror() is zero it's just EOF.
9596         (dump_dictionary) Stubbed out.
9597
9598         * BTW: The source code now exceeds 50000 lines!
9599         
9600 Mon Nov  4 22:03:28 1996  Ben Pfaff  <blp@gnu.org>
9601
9602         * command.c: Added GET to cmd_table[].
9603
9604         * list.q: Removed reference to alloca headers.
9605         (cmd_list) Gave prototype.
9606
9607         * sfm-read.c: Added DEBUGGING comments.
9608         (sfm_read_dictionary) Checks bias correctly.  Sets
9609         dict->var_by_name to NULL.  Calculates long_string_count
9610         correctly.  realloc's dict->var[] array to minimum size.
9611         [DEBUGGING] Calls dump_dictionary.
9612         [DEBUGGING] (dump_dictionary) New function.
9613
9614         * temporary.c: (save_dictionary) Sets var_by_name to NULL.
9615         (restore_dictionary) If the dictionary contains a non-NULL
9616         var_by_name, uses that instead of generating one.
9617         (free_dictionary) Destroys var_by_name.
9618
9619         * var.h: (struct dictionary) Added field `var_by_name'.
9620
9621         * get.c: New file, not complete.
9622
9623 Sun Nov  3 12:24:36 1996  Ben Pfaff  <blp@gnu.org>
9624
9625         * mis-val.c: New enums MV_NOR_*.  New struct num_or_range.
9626         (parse_num_or_range) New function.
9627         (parse_numeric) Reimplemented in order to support LOW THRU <n> and
9628         <n> THRU HIGH missing values.
9629
9630         * output.h: [__GNUC__>1 && __OPTIMIZE__] (width, height) Made
9631         __attribute__((const)).
9632
9633         * q2c.c: (get_token) Merged isdigit || isalpha into isalnum.
9634
9635         * sfm-read.c: Finished reference implementation.
9636
9637         * sfm.h: Includes var.h.
9638
9639         * var.h: Comment fixes.
9640         (struct `variable') Reordered some fields.
9641
9642         * vars-atr.c: (is_num_user_missing) Added support for MISSING_*
9643         constants added previously.
9644
9645 Wed Oct 30 17:13:08 1996  Ben Pfaff  <blp@gnu.org>
9646
9647         * common.h: Comment fixes.  Added declaration of
9648         `second_lowest_value' as variable or macro.  Made `compat_type',
9649         `pgm_state_type' into anonymous enums.
9650
9651         * display.c: Comment fix.
9652
9653         * glob.c: [ENDIAN==UNKNOWN] Added definition for `endian' global
9654         var.
9655         [!defined SECOND_LOWEST_VALUE] Added definition for
9656         `second_lowest_value' global var.
9657         (compat, pgm_state global vars) Changed types to `int'.
9658         (init_glob) Initializes `second_lowest_value'.
9659
9660         * sfm-read.c: Continued work, not complete.
9661
9662         * var.h: Added new MISSING_* constants to handle LOWEST and
9663         HIGHEST.
9664
9665 Sat Oct 26 23:06:06 1996  Ben Pfaff  <blp@gnu.org>
9666
9667         * sfm-read.c: New file, not complete.
9668
9669         * cases.c: (vec_insert) Changed vector expansion algorithm.
9670         (vec_delete) Fixed bug that screwed up deletion sometimes, it was
9671         mucking up the RECODE transformation in particular.
9672         (envector) Harmless change in notation.
9673
9674         dfm is now fairly well tested again.  
9675         * dfm.c: (dfm_get_record) Only returns ext->ptr if ext is
9676         non-NULL--duh.
9677         (cmd_begin_data) if(ext->line) replaced by if(ext && ext->line).
9678
9679         * recode.c: Comment fix.
9680
9681         * sfm.h: Interface should be fairly final now, or at least for a
9682         day or so...
9683
9684         * vfm.c: [DEBUGGING] (index_to_varname) New function.
9685         (open_active_file) [DEBUGGING] Translates ccase indices into
9686         variable names now to make it easier to understand what's really
9687         going on.
9688
9689 Sat Oct 26 20:46:31 1996  Ben Pfaff  <blp@gnu.org>
9690
9691         * data-in.c: Comment fix.
9692
9693         * data-list.c: Includes dfm.h.
9694         (do_reading) Uses new function dfm_push_cust().
9695
9696         * data-out.c: (convert_time, convert_WKDAY, convert_MONTH) Added
9697         `return 1;' at end.
9698
9699         * file-handle.h: Completely changed.  Some parts split off into
9700         new file dfm.h.  Implemented in file-handle.q.
9701         (enum FH_*) Removed.
9702         (struct fh_ext_class) New struct.
9703         (struct file_handle) Retained only these fields: name, norm_fn,
9704         fn, recform, lrecl, mode.  New fields class, ext.
9705         (get_handle_by_name, get_handle_by_filename, parse_file_handle,
9706         close_handle, handle_name) Added `fh_' prefix to name, all
9707         references changed.
9708
9709         * dfm.h: New file, implemented in dfm.c.
9710         (get_record, put_record, fwd_record, bkwd_record, set_record,
9711         get_cur_col) Functions moved from file-handle.h, now prefixed with
9712         `dfm_'.
9713         (dfm_push_cust) New function.
9714
9715         * sfm.h: New file.  Incomplete.
9716
9717         * dfm.c: All functions adjusted/rewritten for new dfm/fhp
9718         interface.  Functions reordered, comments changed.  Not well
9719         tested, probably full of bugs.
9720         (struct dfm_fhuser_ext) New struct.
9721         (dfm_close) New function.
9722         (open_file_r) Pickier about finding `BEGIN DATA.' line.
9723         (open_file_w) User messages changed.
9724         (get_record) Comment fixed.
9725         (read_record) Increments ext->ln even for inline_file.  Calls
9726         dfm_close() for inline_file when `END DATA.' encountered.
9727         (dfm_get_record) Experimental restructuring.
9728         (dfm_push_cust) New function.
9729         (cmd_begin_data) Detects whether the inline file was fully read by
9730         checking whether it is still open; detects whether it was read at
9731         all by checking whether the line number is greater than zero.
9732
9733         * file-handle.q: All functions adjust/rewritten for new dfm/fhp
9734         interface.  Functions reordered, comments changed.  Not well
9735         tested, probably full of bugs.
9736         (init_file_handle) Removed initializers for obsolete fields, added
9737         new fields.
9738         (fh_close_handle) Much simpler, now mainly calls the class
9739         function.
9740         (fh_init_files) Renamed inline file internal filename.
9741
9742         * file-type.c: Includes dfm.h.
9743         (read_from_file_type) Doesn't use dfm internal state anymore.
9744
9745         * inpt-pgm.c, print.c: Include dfm.h.
9746
9747         * recode.c: (internal_cmd_recode) Casts strlen() return value to
9748         int in comparison with other int.
9749
9750         * som-high.c: (build_target) Fixed operator precedence problem in
9751         if statement (& versus ==).
9752
9753 Sat Oct 26 10:39:25 1996  Ben Pfaff  <blp@gnu.org>
9754
9755         * dfm.c: (read_record) Can now read fixed-length records; not
9756         tested.
9757         (put_record) Can now write fixed-length records; not tested.
9758
9759         * file-handle.h: FH_* defines changed to enums.  New enum series
9760         FH_RF_*, FH_MD_*.
9761         (struct file_handle) New members recform, lrecl, mode.
9762
9763         * file-handle.q: Parser changed.
9764         (internal_cmd_file_handle) Added support for new /RECFORM, /MODE,
9765         /LRECL subcommands.  These are compatible with Windows.
9766         (init_file_handle) Initializes recform, mode fields.
9767
9768         * q2c.c: (get_line) When outputting `!' comment lines, now
9769         increments the output file line number so that `#line' directives
9770         are correct.
9771         (make_identifier) New function that converts an arbitrary string
9772         into a valid C identifier.
9773         (dump_vars) Calls make_identifier() in two places in order to
9774         suppress some errors for bad identifiers.
9775         (make_match) Allows TRUE as synonym for YES and FALSE as synonym
9776         for NO.  Allows numbers to be prefixed by underscores to make them
9777         acceptable C identifiers but still to be parsed as numbers by the
9778         Fiasco lexer.
9779
9780 Thu Oct 24 20:13:42 1996  Ben Pfaff  <blp@gnu.org>
9781
9782         * command.c: Re-enabled RECODE, SAMPLE, SELECT IF.
9783         
9784         * dfm.c: Comment fixes. (get_record) Gives error if file handle
9785         was opened for writing.
9786         (open_file_w) New function.
9787         (read_record) Uses strncasecmp if available.  Improved error
9788         messages, comments.
9789         (put_record) New function.
9790
9791         * file-handle.h: Moved function comments into dfm.c and
9792         file-handle.q.  Comment fixes.  Removed declarations of
9793         tilde_expand() and normalize_filename().
9794         (struct file_handle) Changed `open' from boolean to enumerated
9795         field to allow for three states--closed, open for reading, open
9796         for writing--all references changed.
9797
9798         * file-handle.q: Includes filename.h.
9799
9800         * print.c: (CMD_* enums) Renamed PRT_* and moved into var.h; all
9801         references changed.
9802         (alloc_line) Makes allowance for line terminator characters in
9803         calculations.
9804         (print_trns_proc) Now handles OUTFILE, WRITE differences.
9805         (print_space_trns_proc) Handles OUTFILE differences.
9806
9807         * recode.c, sample.c: Comment fixes.
9808
9809         * var.h: (struct print_trns) Changed boolean field `eject' to
9810         bitmapped field `options'; all references changed.  New enums
9811         PRT_* for use with this field.
9812
9813         * exception.h, test-exception.c: Removed.
9814
9815 Thu Oct 24 17:47:14 1996  Ben Pfaff  <blp@gnu.org>
9816
9817         * ascii.c: (delineate) Turned off debug output.
9818
9819         * common.c: [Checker and Linux] (__assert_fail, __eprintf) Moved
9820         to error.c.
9821
9822         * data-in.c: (parse_string_as_format) Sets the entire string value
9823         to spaces, not just the short string part of it.  Is this correct
9824         now? 
9825
9826         * data-out.c: (convert_date) Fixed DATETIME format problems with
9827         decimal places, removed debug code.
9828
9829         * dfm.c: (open_file_r) Fixed bug where an error would occur in the
9830         middle of parsing BEGIN DATA that would cause the lexer to read
9831         from a wild pointer `prog'; now calls new function
9832         preprocess_line() in lexer.c.
9833
9834         * error.c: [__CHECKER__] (hcf) Calls induce_segfault() on improper
9835         termination.
9836         [Checker and Linux] (__assert_fail, _eprintf) Moved from common.c.
9837         Now call induce_segfault() to induce the segfault.
9838         (induce_segfault) New function.
9839
9840         * expr-opt.c: Comment fix.
9841         (parse_sysvar) New function.
9842         (parse_primary) Added system variable support--calls
9843         parse_sysvar().
9844         (global var ops) Added OP_CASENUM operator.
9845
9846         * expr.h: Comment fixes.
9847         (OP_* enum) added OP_CASENUM operator.
9848         (struct casenum_node) New struct.
9849         (union any_union_union) New member `cas' of type `casenum_node'.
9850
9851         * glob.c: (global var last_vfm_invocation) New var.
9852         (init_glob) Initializes last_vfm_invocation.
9853
9854         * lexer.c: (lookahead) Fixed reversed condition on if statement.
9855
9856         * getline.c: (get_line) Split into get_line() and preprocess_line().
9857         (preprocess_line) New function.
9858
9859         * var.h: Declares last_vfm_invocation.
9860
9861         * vfm.c: (procedure) Sets last_vfm_invocation.
9862
9863 Wed Oct 23 21:53:43 1996  Ben Pfaff  <blp@gnu.org>
9864
9865         * command.c: (parse_cmd) Fixed bad assertion related to
9866         lookahead().
9867
9868         * data-in.c: (parse_month) Implemented to parse months according
9869         to full interpretation of standard.
9870         (to_roman) New function.
9871         (parse_wk_delimiter) Bug fix (forgot to skip `WK' in string).
9872         (parse_weekday) Bug fix (forgot to skip all the day name).
9873
9874         * data-list.c: (read_from_data_list_fixed) Fixed bug that screwed
9875         up parsing of multirecord data items.  Also fixed user message.
9876
9877         * data-out.c: Comment fix.
9878         (year2, year4, convert_date, convert_time, convert_WKDAY,
9879         convert_MONTH) New functions to support time & date output.
9880         (convert_format_to_string) Calls new time & date output routines.
9881
9882         * expr-prs.c: (nary_num_func) Found a bug, but didn't fix it yet.
9883
9884         * lexer.c: (lookahead) Noted a previously unnoticed caveat in
9885         comment.
9886
9887         * main.c: [DEBUGGING] (dump_token) Updated to handle getline.h.
9888
9889         * misc.c: (global var formats) Fixed declarations of DATETIME,
9890         TIME, DTIME.
9891
9892         * postscript.c: (text) Fixed a pair of bugs in the reallocation of
9893         the output_char buffer.
9894
9895         * vars-prs.c: (parse_DATA_LIST_vars) Fixed a failure to free
9896         memory bug.  Fixed user messages.
9897
9898 Tue Oct 22 17:27:04 1996  Ben Pfaff  <blp@gnu.org>
9899
9900         * Removed #pragma argsused from lots of places.
9901         
9902         * data-in.c: Implemented zoned decimal and time-date formats.
9903         Untested.  This is a huge chunk of code--maybe 1000 lines and 50
9904         new functions.
9905
9906         * data-out.c: Implemented zoned decimal format.
9907
9908         * expr.h: Moved yrmoda() declaration here from exprP.h.
9909
9910         * misc.c: (global var formats) Minor fixes--added
9911         FCAT_SHIFT_DECIMAL to formats N and Z.
9912         (convert_fmt_ItoO) Added support for format Z.
9913
9914         * som-frnt.c: (som_set_value) Fixed bug regarding string values.
9915
9916 Mon Oct 21 20:39:59 1996  Ben Pfaff  <blp@gnu.org>
9917
9918         * command.c: (parse_cmd) [GLOBAL_DEBUGGING] Inserted call to
9919         som_check_workspace() that is activated between commands.
9920
9921         * data-list.c: (dump_fixed_table, dump_free_table) Finished these
9922         for good, I hope.
9923
9924         * list.q: (begin_row) Changed title expansion style from
9925         SOPT_X_VERT to SOPT_X_SHSP.
9926
9927         * som-frnt.c: Now includes `somP.h'.
9928         (som_push_workspace, som_pop_workspace) New functions that, taken
9929         together, form a solution to the recursive table building problem
9930         mentioned yesterday.  Surrounded every table output routine
9931         throughout the program with calls to these functions.
9932         [GLOBAL_DEBUGGING] (som_check_workspace) New function.
9933         (som_create_table) Checks that there's an active workspace.
9934         (som_destroy_all_tables, som_crush) Removed.
9935
9936         * som-high.c: (global var som_preserve_tables) Removed, all
9937         references deleted.
9938         (som_submit_table) Checks that there's an active workspace.
9939         (dump_columnated_table) Doesn't columnate tables that would have
9940         just one row per column.
9941         (dump_crush_page, som_dump_crush_page) Removed debugging code.
9942         (som_dump_crush_page) Moved row number labels from left side of
9943         tables to right side.
9944         (som_get_table_size) Added support for SOPT_X_SHSP.
9945
9946         * som.h: New cell expansion type SOPT_X_SHSP.
9947
9948         * somP.h: (global vars arena_stack, n_arena_stack, m_arena_stack)
9949         New vars.
9950         (global var curtab_arena) Moved from som-frnt.c.
9951
9952 Sun Oct 20 13:45:28 1996  Ben Pfaff  <blp@gnu.org>
9953
9954         * ascii.c: [GLOBAL_DEBUGGING] (SUPPRESS_WARNINGS) New debug option
9955         that causes bad location warnings to be suppressed.
9956         (delineate) Saves current font when calling draw_text(); fixed
9957         handling of NULLs when backing up.  Also fixed line-wrapping bug.
9958
9959         * command.c: Re-enabled `LEAVE', `NUMERIC', `PRINT', `PRINT EJECT',
9960         `PRINT FORMATS', `PRINT SPACE', `STRING', `TITLE', `WRITE'.
9961
9962         * common.c: Added code to cause assertion failure to dump core
9963         when run under Checker.
9964
9965         * data-list.c: (dump_fixed_table) Fixed some inconsistencies, but
9966         there are still bugs.
9967
9968         * glob.c: (__eprintf) Removed.
9969
9970         * list.q: Inserted som_preserve_tables kluge that prevents tables
9971         from being thrown away due to recursive table building through
9972         som_output_line being called from a transformation during the LIST
9973         procedure invocation.  This is a general problem that must be
9974         solved in a better way since it applies to all procedures in
9975         general.
9976         (begin_row) Changed title options to SOM_X_VERT from SOM_X_BOTH.
9977         (flush_table) Removed SOM_TOPT_PRESERVE from submission options.
9978
9979         * numeric.c: Fixed several errors in the form of msg() calls.
9980
9981         * print.c: Updated for use of som.
9982         (dump_table) Reimplemented.
9983         (print_trns_proc) Calls som_eject_page() instead of eject_page().
9984         Calls som_output_text() instead of outs_line().
9985
9986         * som-frnt.c: (som_destroy_all_tables) Sets som_preserve_tables to
9987         0.
9988         (som_output_text) Function moved from som-low.c.  Interface
9989         changed.
9990
9991         * som-high.c: (som_preserve_tables) New global public variable
9992         declared in som.h.
9993         (som_submit_table) Destroys the tables only if som_preserve_tables
9994         is 0.
9995         (paginate_horizontally) Bugfix: sets som.mpw even if there's only
9996         one subrow per row.  Now labels subrows if there's more than one
9997         subrow per row.
9998         (dump_crush_table) Added wishlist comment.
9999         (som_eject_page) New public function declared in som.h.
10000
10001         * som-low.c: (som_dump_crush_page) Draws row labels if there's
10002         more than one subrow per row.
10003         (som_output_text) Moved to som-frnt.c.
10004
10005         * som.h: (SOM_TOPT_PRESERVE) Removed.
10006
10007         * title.c: (get_title) Changed interface.
10008         (cmd_title) Changed `title' to `outp_title'.
10009         (cmd_subtitle) Changed `subtitle' to `outp_subtitle'.
10010
10011 Sun Oct 20 09:04:15 1996  Ben Pfaff  <blp@gnu.org>
10012
10013         * list.q: (flush_table) Conforms to new partial options in
10014         som_submission_form.
10015
10016         * som-high.c: (paginate_horizontally) Changed form of subrow
10017         number labels.
10018         (build_target) Omits spacing before table if
10019         SOM_TOPT_PARTIAL_OMIT_TOP is selected.
10020         (dump_crush_page) Changed interface.  Only trims bottom rule if
10021         SOM_TOPT_PARTIAL_OMIT_BTM is not selected.
10022         (dump_crush_table) Handles partial tables.
10023         (output_row_label) New function.
10024         (som_dump_crush_page) Emits subrow number labels.  Draws vertical
10025         rule on the right edge of narrow subrows.
10026
10027         * som.h: Changed SOM_SUB_PARTIAL_* series of submission type
10028         constants to a series of SOM_TOPT_PARTIAL_* submission options.
10029         All references updated.
10030
10031 Fri Oct 18 19:46:49 1996  Ben Pfaff  <blp@gnu.org>
10032
10033         * misc.c: Comment fix.
10034
10035         * som-high.c: (examine_table) Treats crushed tables separates for
10036         purpose of determining header size.
10037         (paginate_horizontally) Allots space for line numbers in crushed
10038         tables with lots of subrows per row.  Calculates the `maximum page
10039         width', the width of the widest horizontal page.
10040         (build_target) Removed trim argument; all references changed.
10041         Stricter assertions.  (dump_crush_page) New function.
10042         (dump_crush_table) Reimplemented.
10043
10044         * som-low.c: (som_dump_page) Uses new RULE_ROW &c. constants.
10045         (som_dump_crush_page) Reimplemented, interface changed.
10046
10047         * somP.h: Many many new helper macros for use with crushed tables.
10048         (global var som) Removed `tv', `cum_y' members; all references
10049         removed.  New members `mpw', `digit_space'.
10050
10051 Sun Sep 29 19:37:03 1996  Ben Pfaff  <blp@gnu.org>
10052
10053         * arena.c: (arena_alloc) [!DISCRETE_BLOCKS] Removed `size'
10054         variable, changed to constant 1024.
10055         (arena_ca_strdup) Changed `sizeof(a_string)' to
10056         `sizeof(c_string)'.
10057         (arena_ca_strdup) [!DISCRETE_BLOCKS] Changed bad cast from
10058         `(c_string *)' to `(char *)'; this fixed some offset problems.
10059
10060         * filename.c: (readlink_malloc) Changed initial allocation from
10061         100 bytes to 128.
10062         (good_getcwd) Changed from xmalloc() to local_alloc(); removed
10063         comment.
10064
10065         * postscript.c: (read_fontmap) Fixed leak by changing &owner to
10066         &fm->owner in several places.
10067
10068         * som-high.c: (output_table) Changed interface to rest of world.
10069         (examine_crush_table) Removed.  Crushed tables are re-broken now,
10070         in preparation for rewrite.
10071
10072         * som.h: Comment fix.
10073
10074 Sat Sep 28 21:28:07 1996  Ben Pfaff  <blp@gnu.org>
10075
10076         * ascii.c: (ascii_init_driver) Disposes of x->file.filename and x
10077         itself in the cleanup stage.
10078
10079         * descript.q: (display) At least temporarily, changed the table
10080         format to a crushed table.
10081
10082         * list.q: (begin_row) At least temporarily, added horizontal lines
10083         between cases.
10084
10085         * som-high.c: (examine_crush_table) Sets som.hh to the width of
10086         the horizontal "headers," that is, to the width of the far left
10087         and far right rules.
10088         (justify_pagination) Sets som.th to the width of the widest row
10089         in the crushed table.  Fixed inner loop off-by-one error.
10090
10091         * som-low.c: (som_dump_crush_page) Added code to draw horizontal
10092         rules.
10093
10094         * somP.h: Comment fix.
10095
10096 Fri Sep 27 20:08:39 1996  Ben Pfaff  <blp@gnu.org>
10097
10098         * filename.c: (open_file_ext) Now, doesn't set f->file to NULL
10099         before closing it; also, opens the constructed filename `s'
10100         instead of f->filename.
10101
10102         * postscript.c: Moved initialization of x->loaded, x->prop,
10103         x->fixed, x->current, also the add_encoding() calls, into
10104         postopen().
10105         (preclose) Destroys x->combos; sets x->loaded, x->combos to NULL;
10106         sets x->last_font to NULL; sets x->next_combo to zero.
10107
10108         * som-high.c: (crushed_row_height) Moved definition farther up.
10109         (som_submit_table) Doesn't calculate line width, font size until
10110         after calling open_page(), to accomodate changes to PostScript
10111         driver.
10112         (vert_headers) Removed; equivalent functionality moved to
10113         examine_table(), examine_crush_table().
10114         (justify_pagination) Replaced with different algorithm.
10115         (dump_crush_table) Bugfix that caused tables to fail to be clipped
10116         at the bottom of the page.
10117
10118 Thu Sep 26 22:20:26 1996  Ben Pfaff  <blp@gnu.org>
10119
10120         * command.c: Added cmd_list back into cmd_table.
10121
10122         * freq.c, frequencies.q, repeat.c, list.q, vars-atr.c, vfm.c:
10123         Comment fix: `#define DEBUGGING' --> `#define DEBUGGING 1'.
10124
10125         * list.q: (flush_table) Updated to new som_submission_form format.
10126
10127         * som-frnt.c: Comment fix.
10128
10129         * som-high.c: Changed `#endif' to `#undef EXTERN'.
10130         (output_table) Calls som_get_table_size() directly; handles
10131         crushed tables.
10132         (examine_crush_table) New function; calls vert_headers().
10133         (examine_table) Moved some code into new function, vert_headers().
10134         (justify_pagination) New function.
10135         (dump_plain_table) Removed `static' from `cy'.
10136         (dump_crush_table) New function.
10137
10138         * som-low.c: (som_dump_crush_page) New function.
10139
10140         * som.h: Comment fixes.
10141         (enum SOM_TOPT_CRUSH) New.
10142         (SOM_SUB_PARTIAL_BEG, SOM_SUB_PARTIAL_MID, SOM_SUB_PARTIAL_END)
10143         Temporarily set to zero to make do with LIST procedure.
10144
10145         * somP.h: Re-ordering.
10146
10147 Wed Sep 25 19:36:11 1996  Ben Pfaff  <blp@gnu.org>
10148
10149         * som.c: Split into som-frnt.c, som-high.c, som-low.c.
10150
10151         * somP.h: New file for use by som-high.c, som-low.c.
10152
10153         * q2c.c: Added definition for VME.
10154         (get_line) Now dumps `!' comment lines to the output file
10155         verbatim.
10156
10157         * crosstabs.q, descript.q, file-handle.q, frequencies.q, list.q,
10158         set.q: Changed format of `!' comment lines.
10159
10160 Tue Sep 24 18:39:09 1996  Ben Pfaff  <blp@gnu.org>
10161
10162         * All source files: Added copyright notice.
10163
10164         * common.c: (xmalloc, xrealloc, xstrdup) Cast size_t's to unsigned
10165         longs in msg() calls.
10166
10167         * con32s.c: (xmalloc, xrealloc) Updated from common.c.
10168
10169         * q2c.c: (xmalloc, xrealloc, xstrdup) Updated from common.c.
10170
10171 Sat Sep 21 23:16:31 1996  Ben Pfaff  <blp@gnu.org>
10172
10173         * output.c: (outp_read_devices) Changed criteria for
10174         distinguishing different types of lines.
10175
10176 Fri Sep 20 22:52:28 1996  Ben Pfaff  <blp@gnu.org>
10177
10178         * cmdline.c: Changed syntax message.
10179
10180         * filename.c: (good_getcwd) Bug fix (?).
10181         (normalize_filename) [__BORLANDC__] Uses _fullpath() library
10182         function.
10183         (search_path) Appends DIR_SEPARATOR to directory name only if it
10184         does not already end with one.
10185
10186         * glob.c: Checks STAT_PAGER envvar before PAGER.
10187
10188         * output.c: Checks environment variables instead of just local
10189         macros.
10190
10191 Tue Sep 10 21:39:00 1996  Ben Pfaff  <blp@gnu.org>
10192
10193         * arena.c: (arena_destroy) Swatted a subtle bug that cropped up
10194         when the pointer passed to the function was within the arena
10195         itself, so that it couldn't properly be set to NULL _after the
10196         arena was freed_.
10197
10198         * command.c: Re-enabled DISPLAY.
10199
10200         * display.c: Rewritten to handle tables.  Untested.
10201
10202         * filename.c: (search_path) Fixed memory leak.
10203
10204         * frequencies.q: (cmd_frequencies) Frees v_variables.
10205         (postcalc) Calls cleanup_freq_tab() after displaying statistics.
10206         (cleanup_freq_tab) New function to garbage collect.
10207         (dump_full) Elegantized.
10208
10209         * main.c: New comment.
10210
10211         * output.h: New tag for tagged quotes: TAG_NEWLINE.
10212
10213         * postscript.c: Comment fix.
10214         (release_fontmap, free_font_entry) New functions.
10215         (ps_init_driver) Sets free_font_entry() as the freefunc for
10216         hashtable `loaded'.  Calls release_fontmap() when destroying a
10217         driver; also frees the output filename; also frees the
10218         ps_driver_ext block.
10219         (free_ps_encoding) Frees the filename as well as the encoding
10220         block.
10221         (output_encodings) Frees the line buffer and pops the msg-filename
10222         stack.
10223         (read_fontmap) Frees the fontmap filename and the line buffer.
10224         (postopen, preclose) Misc. garbage collection fixes.
10225         (ps_open_page) Destroys the `combos' hash table; sets `last_font'
10226         to NULL; this fixes some output problems.
10227         (text) Handles TAG_NEWLINE.  Untested.
10228
10229         * som.c: (cell_byte_size) Merged SCON_VALUE and SCON_TEXT cases.
10230         (som_set_string) Removed.  All references changed to
10231         `som_set_text'.
10232         (som_set_text) Rewritten.  New interface.  More general.
10233
10234         * som.h: Minor format changes.
10235         (struct som_value_cell) Removed; all references changed to
10236         `som_text_cell'.
10237         (enums SOT_*) Changed.
10238
10239 Mon Sep  9 21:43:13 1996  Ben Pfaff  <blp@gnu.org>
10240
10241         * command.c: Re-enabled SPLIT FILE.
10242
10243         * postscript.c: Comment fix.
10244
10245         * som.h: Added `SOT_NONE'.
10246
10247         * split-file.h: (cmd_split_file) Removed superfluous parenthesis.
10248
10249         * vfm.c: (dump_splits) Reimplemented.
10250
10251 Sat Sep  7 22:35:12 1996  Ben Pfaff  <blp@gnu.org>
10252
10253         * Compiled the project under gcc 2.7.2, which gave some new
10254         warnings.  This led to many additions of casts from unsigned to
10255         int sprinkled throughout the code.
10256         
10257         * arena.c: Many uses of `unsigned' changed to `size_t'.
10258
10259         * command.c: Added END FILE, END REPEAT to command table.
10260         (var cmd_end_repeat) Renamed cmd_end_repeat_p.
10261         (find_command, FILE_TYPE_okay) Not commented out anymore.
10262         (parse_cmd) Calls FILE_TYPE_okay again.
10263         (output_line) Added calls to som_output_text() to put the line
10264         in the output files.
10265
10266         * common.c: (macro VME) Format changes.
10267         (xstrdup) Asserts that its argument is not NULL.
10268         
10269         * data-list.c: Implemented dump_fixed_table().
10270         
10271         * inpt-pgm.c: Formatting changes.  Comment changes.
10272         (end_case_proc) Renamed end_case_trns_proc.
10273         (cmd_end_file, end_file_trns_proc) New functions.
10274
10275         * misc.c: Many uses of `int' and `unsigned' changed to `size_t'.
10276
10277         * misc.h: (local_strdup) New macro corresponding to strdup() but
10278         allocating its data through local_alloc() if possible--that is, if
10279         GNU C is in use.
10280
10281         * postscript.c: Comment changes.
10282         (quote_ps_name, quote_ps_string, output_encodings) New functions.
10283         (output_line, add_string) New macros supporting
10284         output_encodings().
10285         (postopen) Fixed contents of ${fixed-font} and ${prop-font}
10286         substitution vars.  Calls output_encodings() when a line
10287         consisting of `!encodings' is encountered.
10288         (preclose) Some code moved into quote_ps_string().
10289         (dump_line) Changed into macro supporting dump_fancy_line().
10290         (switch_font) Now outputs DSC "%%IncludeResource: font (...)"
10291         command when appropriate.
10292         (write_text) Fixed `literal_char' array (I think it's fixed, at
10293         least.)
10294         (text) Fixed bug when width was zero.  Now exits immediately on
10295         zero height_left.  Now, when executing `goto restart;', checks
10296         that cp<end, so that we don't read beyond end-of-string.  Also,
10297         outputs the correct code to the output file by outputting the code
10298         from the metric instead of the internal metric index.
10299
10300         * repeat.c: (cmd_end_repeat) New function.
10301
10302         * som.c: (var som) `headers' renamed `options' and semantics
10303         changed.  All references changed.
10304         (draw_title) `if(px!=-1 || px!=-1)' --> `if(px!=-1 || py!=-1)'.
10305         (build_target) Only inserts spacing if SOM_TOPT_SPACING not
10306         selected.
10307         (som_text_table) Removed.
10308         (som_output_text) New function.
10309
10310         * som.h: (struct som_submission_form) Removed `header', `reuse',
10311         replaced with bitmapped field `options'.
10312         (SOM_TOPT_*) New enum set for som_submission_form.options.
10313         (SOT_*) New enum set for som_output_text().
10314
10315         * temporary.c: (copy_variable) When copying the var label, only
10316         calls xstrdup() if it's non-NULL.
10317
10318         * var.h: (enum type `vartype') Removed; all references changed to
10319         `int'.
10320
10321         * vars-atr.c: (init_variable) Changed local var `nbytes' from
10322         `int' to `size_t'.
10323
10324 Thu Sep  5 22:05:56 1996  Ben Pfaff  <blp@gnu.org>
10325
10326         * font.h: Comment changes.
10327
10328         * groff-font.c: (groff_read_font) Initializes `name' field to
10329         NULL.  Handles `encoding' field.
10330
10331         * hash.c: (hsh_dump) [GLOBAL_DEBUGGING] Output formatting changes.
10332
10333         * postscript.c: (struct font_entry) Removed `position' field.
10334         (struct ps_font_combo) New struct.
10335         (struct ps_driver_ext) Removed field `next_position'.  New fields
10336         `combos', `next_combo'.  `last_font' field changed from
10337         `font_entry *' to `ps_font_combo *'.
10338         (ps_init_driver) Reformatted; handles new fields.  When
10339         OPO_AUTO_ENCODE is set, adds the two default fonts' encodings to
10340         the encoding list.
10341         (get_encoding, find_encoding_file) New functions.
10342         (add_encoding) Some code moved out into find_encoding_file().
10343         (postopen) Changed value for ${title}.
10344         (preclose) Sets `loaded' field to NULL after destroying the hash
10345         table.
10346         (ps_open_page) Added comment.  Inits the `combos' and `next_combo'
10347         fields.
10348         (ps_text_set_font_by_position) Figures out the current family if
10349         not known.
10350         (compare_ps_combo, hash_ps_combo, free_ps_combo) New functions.
10351         (switch_font) Implemented.
10352         (write_text) Calls switch_font() more often.  Format changes.
10353         #undefs its macros after they're no longer useful.
10354         (text) Changed `continue' at one point to a jump to the top of the
10355         loop because we don't want `separate' reset to 0 at that point.
10356         (load_font) No longer sets `position' in the font_entry created.
10357
10358 Wed Sep  4 21:45:35 1996  Ben Pfaff  <blp@gnu.org>
10359
10360         * font.h: (struct font_desc) New member `encoding', which is not
10361         properly handled yet.
10362
10363         * glob.c: (init_glob) Some new i18n code, which is probably
10364         screwed up.
10365
10366         * output.c: (outp_read_devices, outp_get_paper_size) Changed
10367         `size' local from `int' to `size_t'.
10368
10369         * postscript.c: New driver configuration parameter `auto-encode'.
10370         New enums OPO_AUTO_ENCODE, ODA_COUNT.
10371         (struct font_entry) New member `position'.
10372         (struct ps_driver_ext) Reordered.  New hash table member
10373         `encodings'; new members `next_position', `next_encoding',
10374         `last_font'.  Members `current', `prop', `fixed' changed from type
10375         `font_desc *' to `font_entry *'; all references changed.
10376         (struct ps_encoding) New struct.
10377         (read_ps_encodings, compare_ps_encoding, hash_ps_encoding,
10378         free_ps_encoding, add_encoding) New functions.
10379         (ps_init_driver) Added OPO_AUTO_ENCODE to default
10380         x->output_options.  Initializes new members of ps_driver_ext.
10381         Changed default value for prologue_fn, encoding_fn.  Calls
10382         read_ps_encodings after loading default fonts.
10383         (option_tab[], ps_option) Handle new configuration parameter.
10384         (switch_font) New function.
10385         (struct output_char) `font' member changed from `font_desc *' to
10386         `font_entry *'.  New member `separate'.
10387         (read_fontmap) Changed `size' from `int' to `size_t'.
10388         (output_line, put_number) New macros for write_text().
10389         (write_text) Optimizes text output by consolidating multiple
10390         calls to PostScript `show' operator.
10391         (text) Keeps track of when text arguments can't be consolidated by
10392         write_text(), and marks those spots in the output stream.
10393         (load_font) Sets `position' of the allocated font_entry to -1, cuz
10394         the font hasn't been switched to by switch_font(), which is where
10395         the position is important--the PostScript is what cares about the
10396         position.
10397
10398 Sat Aug 31 23:52:38 1996  Ben Pfaff  <blp@gnu.org>
10399
10400         * hash.c: (hsh_destroy) Ignores NULL argument.  Doesn't try to
10401         call a NULL free_func.
10402         (hsh_rehash) Elegantized.
10403         (hsh_probe) Fix bug that manifested when the table was expanded
10404         and thus had to change location in memory.  Good thing
10405         too--otherwise could have been much more subtle.
10406         (hsh_find) [GLOBAL_DEBUGGING] Not stubbed out anymore.
10407         (hsh_foreach) New function for hash table iteration.
10408
10409         * hash.h: (struct hsh_iterator) New.
10410
10411         * lexer.c: (parse_tagged_quote) Font and family name strings in
10412         tags are now null-terminated.
10413
10414         * output.c: (outp_evaluate_dimension) Fixed over-aggressive unit
10415         parsing.
10416         (internal_get_paper_size, outp_get_paper_size) Fixed; now work as
10417         documented.  (Never before tested?)
10418
10419         * output.h: Comment changes.
10420
10421         * postscript.c: New driver options `optimize-text-size',
10422         `optimize-line-size', `max-fonts-simult'.  New enum set for
10423         specing cached line types.  Comment fixes.
10424         (struct line_form) New struct.
10425         (struct ps_driver_struct) New members `text_opt', `line_opt',
10426         `max_fonts', `lines'.
10427         (ps_init_driver) Initializes new members of ps_driver_struct.
10428         (user option type enum set) New member `nonneg_int_arg'.
10429         (static var option_tab[]) Supports new options.
10430         (ps_option) Handles new options.
10431         (find_ps_file) Made static.  No longer calls hsh_dump().
10432         (ps_get_var) Made static.
10433         (preclose) Dumps out proper DSC trailer.
10434         (ps_open_page) Elegantized.
10435         (ps_close_page) Calls dump_lines() if appropriate.
10436         (ps_line_horz, ps_line_vert, ps_line_intersection) Reduced to
10437         wrappers around line().
10438         (int_2_compare, compare_line, dump_line, dump_fancy_line,
10439         dump_lines, hash_line, free_line, line) New functions for support
10440         of line caching.
10441         (write_text, text) Made static.
10442         (text) Added to font support, not finished.
10443
10444 Thu Aug 29 21:36:41 1996  Ben Pfaff  <blp@gnu.org>
10445
10446         * font.h: (struct font_desc) New members ascent, descent.
10447
10448         * groff-font.c: (groff_read_font) Calculates font ascent and
10449         descent from the ascent and descent of the `d' and `p' characters,
10450         respectively, as per a suggestion on comp.fonts.
10451
10452         * postscript.c: (ps_open_page, ps_close_page, ps_line_horz,
10453         ps_line_vert, ps_line_intersection) Rewritten to deal with changed
10454         prologue.
10455         (write_text) Handles text right-justification and centering (not
10456         full justification).  Still very inefficient.  (One output line
10457         per character?!)
10458         (struct output_char) Added fields for font and font size.
10459         (text) Many bugfixes.
10460
10461 Sat Aug 24 23:26:00 1996  Ben Pfaff  <blp@gnu.org>
10462
10463         * cmdline.c: (usage) Calls outp_list_classes().
10464
10465         * font.h: Comment fix.
10466
10467         * groff-font.c: New exported global var `space_index'.
10468         (groff_init) New function to initialize `space_index'.
10469         (hash_kern) Casts result to unsigned.
10470         (font_name_to_index) Renamed font_char_name_to_index.  All
10471         references changed.  Also, now returns the value of `space_index'
10472         when passed an ASCII space character as an argument.  Fixed
10473         handling of nulls.
10474         (font_get_kern_adjust) Changed i from `int' to `unsigned'.
10475         Handles passed NULL pointers properly.
10476
10477         * lexer.c: (parse_tagged_quote) Comment fix.  Better range
10478         checking.
10479
10480         * output.c: (outp_list_drivers) Removed.  Removed all references.
10481         
10482         * output.h: Comment fixes.
10483
10484         * postscript.c: (ps_open_global) Calls groff_init().
10485         (output_char) New structure.
10486         (write_text) New function.
10487         (text) No longer stubbed out!  Now the output is correct--with a
10488         few exceptions, one of them being that the page has to be held
10489         upside down into a mirror.
10490
10491 Sun Aug 11 21:31:22 1996  Ben Pfaff  <blp@gnu.org>
10492
10493         * font.h: Comment fix.
10494         
10495         * font.c: (name_to_index) Renamed font_name_to_index, made extern.
10496         All callers changed.
10497         (number_to_index) Renamed font_number_to_index, made extern.  All
10498         callers changed.
10499         (font_get_kern_adjust, font_get_char_metrics) New functions.
10500
10501         * output.h: New constant OUTP_T_INTERNAL_DRAW.
10502
10503         * postscript.c: Changed default line width back to 1/2 point.
10504         (ps_line_horz, ps_line_vert, ps_line_intersection) Now lines are
10505         in the center of the space allotted for them, not just a fixed
10506         offset from the edge of the space; this fixes some bugs.
10507         (ps_line_intersection) Now supports all command line styles.
10508         (ps_text_get_size) Bug fix in computation of em width.
10509         (text) New function, the meat behind ps_text_metrics and
10510         ps_text_draw.  Not complete.
10511         (ps_text_metrics, ps_text_draw) Removed the stub taken from
10512         ascii.c; call text().
10513
10514 Sat Aug 10 23:28:17 1996  Ben Pfaff  <blp@gnu.org>
10515
10516         * arena.c: (arena_free) Assert that the argument is non-NULL.
10517         
10518         * groff-font.c: (add_kern) Calls arena_free() for old_kern if and
10519         only if old_kern is non-NULL.
10520
10521         * postscript.c: (ps_init_driver) Changed default line width to 1
10522         point.
10523         (postopen) New prologue variables.
10524         (ps_line_horz, ps_line_vert, ps_line_intersection) Implements some
10525         more of the common line styles properly, but not all.
10526         (ps_text_metrics) Fixed problem with this stubbed out version that
10527         kept it from taking font sizes into account.
10528
10529 Thu Aug  8 22:31:11 1996  Ben Pfaff  <blp@gnu.org>
10530
10531         * arena.c: (arena_malloc) Bug fix.
10532         (arena_dump) [GLOBAL_DEBUGGING] New function.
10533
10534         * ascii.c: Comment fix.
10535         (count_fancy_chars, delineate) Now static functions.
10536         
10537         * filename.c: (interp_vars) Bug fixes.
10538
10539         * font.h: Comment fixes.
10540
10541         * glob.c: (init_glob) Sets set_viewwidth, set_viewlength at
10542         beginning in case we have an error message to display before
10543         initializing the display.
10544
10545         * groff-font.c: Comment fix.  Changed rehash threshold from 2/3
10546         full to 1/2 full.
10547         (groff_read_font) Bug fixes.
10548         (name_to_index) Increments hash.used.  Sets `name' field of hash
10549         entry properly.
10550         (add_kern) Sets kern_max_used after rehashing.  Other bug fixes.
10551
10552         * hash.c: Return type changed.
10553
10554         * postscript.c: Continued development.  Now marks lines on the
10555         paper, but very buggy.
10556
10557 Sat Aug  3 20:50:35 1996  Ben Pfaff  <blp@gnu.org>
10558
10559         * Changed comments in many source files from `/* xxx /* yyy */' to
10560         `/* xxx */ /* yyy */' for cleanliness.
10561
10562         * arena.c: (arena_sd_strdup) New function.
10563         
10564         * ascii.c: (struct ascii_driver_ext) New member `file'.
10565         (ascii_init_driver) Fills out member `file' for initing; uses
10566         close_file_ext for closing drivers.
10567         (ascii_option) Changed %.*s back to %s because the a_string's are
10568         always null-terminated.
10569         (postopen, preclose) New functions.
10570         (ascii_open_page) Uses new style of open_file_ext.
10571         (ascii_option, commit_line_buf, output_lines) Use ext->file.file
10572         instead of this->output.
10573         (__assert_fail) Removed.
10574
10575         * cmdline.c: Changed syntax_message[].
10576
10577         * error.c: #include's <readline/history.h> only if the history
10578         library is available, not if just the readline library is
10579         available.
10580
10581         * filename.c: (expand_line) Removed alloca() support.
10582         (interp_vars) No longer tilde-expands argument.  Limit on output
10583         length removed.
10584         (tilde_expand) Now treats argument as path rather than filename.
10585         [!unix] Now is a no-op function.
10586         (search_path) Better verbose message formatting.
10587         (open_file, close_file) Comment fixes.
10588         (close_file) [!unix] Doesn't bother with pipes.
10589         (open_file_ext) Completely rewritten, interface revamped.
10590         (close_file_ext) New function.
10591
10592         * font.h: Comment changes.
10593
10594         * frequencies.q: Removed AIX alloca support since it doesn't use
10595         alloca.
10596
10597         * hash.c: Comment changes & additions.
10598         (hsh_create) Initializes entire table instead of first M entries.
10599         (hsh_probe) Stupid bug fixed.  Now it works.
10600         (hsh_dump) [GLOBAL_DEBUGGING] New function.
10601
10602         * main.c: (parse) Detects EOF properly in token-eating loop.
10603         Should the STOP token have its value changed to 0?
10604
10605         * misc.c: (blp_getdelim) [HAVE_GETDELIM] Now it's a macro.
10606         (blp_getline) Now it's a macro.
10607
10608         * output.h: (struct outp_driver) Removed members output, filename.
10609         
10610         * output.c: (outp_init) [!NO_POSTSCRIPT] Installs PostScript
10611         drivers in driver table.
10612         (outp_read_devices) Frees buf.  Warns if there are no active
10613         output drivers.
10614         (outp_configure_clear) Sets outp_configure_vec to NULL after
10615         deleting its elements.
10616         (configure_driver, destroy_driver) Removed references to output,
10617         filename members of outp_driver.
10618         (outp_evaluate_dimension, internal_get_paper_size,
10619         outp_get_paper_size) New functions.
10620
10621         * postscript.c: Continued development.  Now links but doesn't make
10622         any marks on the page.  Lotsa bugs I suppose.
10623
10624         * str.c: (strcasecmp) [!HAVE_STRCASECMP] New function.
10625
10626         * str.h: Comment changes.
10627
10628 Sat Jul 27 22:32:38 1996  Ben Pfaff  <blp@gnu.org>
10629
10630         * Removed dependencies on non-nested comments in several files.
10631         Also removed references to (unix || __unix__) in #if's since
10632         prefh.orig makes those two equivalent.
10633         
10634         * ascii.c: (ascii_open_global) Creates ascii_arena.
10635         (ascii_close_global) Destroys ascii_arena.
10636         (ascii_init_driver) Doesn't create ascii_arena.
10637         (ascii_copy_driver) Removed.
10638         (ascii_option) Possible bugfix regarding %s vs. %.*s with a_string's.
10639         (outp_class ascii_class) Removed ascii_copy_driver reference.
10640
10641         * frequencies.q: Now can display all statistics except median.
10642         Still not finished.
10643
10644         * output.c: Handles outp_class.ref_count so output class
10645         destructors are called properly.
10646         (add_class) Sets ref_count to 0.
10647         (configure_driver) Initializes class if ref_count++ is 0.
10648         (destroy_driver) Destructs class if --ref_count is 0.  Frees the
10649         class output file name.
10650         
10651         * output.h: (struct outp_class) Removed copy_driver, inited.
10652         Added ref_count.
10653
10654         * postscript.c: Completely replaced but not finished.
10655         
10656 Tue Jul 23 21:48:36 1996  Ben Pfaff  <blp@gnu.org>
10657
10658         * approx.h: #includes <float.h>.
10659
10660         * arena.h, arena.c: Many functions changed to take an arena **
10661         instead of an arena *, for consistency.  All callers changed.
10662         (arena_alloc) Now creates a new arena if passed *A that is NULL.
10663         (arena_destroy) Sets *A to NULL.
10664         
10665         * ascii.c: (delineate) Implements OUTP_T_VERT correctly.  Removed
10666         assertion that `width' be positive.
10667
10668         * command.c: Removed #if's from cmd_table.
10669         (walk_cmdtable_func) [0] New function (debug code).
10670         (init_cmd_parser) [0] Dumps out cmd_table (debug code).
10671         (parse_cmd) Doesn't return failure for unimplemented commands.
10672
10673         * common.h: (SYSMIS) Changed from DBL_MAX to -DBL_MAX.
10674         (SYSCODE) New constant macro.
10675
10676         * descript.q: Checks for positive n_variables before performing
10677         analysis.
10678
10679         * file-handle.q: (get_handle_by_filename) Bug fix: passes &f to
10680         avl_find instead of &fp as arg 2.
10681
10682         * frequencies.g, frequencies.q: Continued updating; now compiles &
10683         works again, but not complete.
10684
10685         * main.c: Changes to user messages.
10686
10687         * misc.c: (reverse) [0] New function.
10688
10689         * settings.h: Comment removed.  #includes "common.h".
10690
10691         * som.c: (som_set_null) New function.
10692         (som_set_value, som_set_string, som_set_text) More detailing
10693         assertions.
10694         (som_set_float) Implemented function.
10695         (dump_columnated_table) Bug fix regarding page breaks.
10696         (draw_cell) Bug fix regarding text that spilled out of a cell.
10697         (draw_intersection, draw_horz_rule, draw_vert_rule) No longer draw
10698         null lines.
10699         (get_cell_size) Support SCON_EMPTY cells.
10700         (get_table_size) When calculating rules' widths and heights, mask
10701         out SLIN_SPACING bit.  Added SOPT_X_HLTL support.
10702         
10703         * som.h: (som_any_cell) New option SOPT_X_HTLT.  Removed
10704         SOPT_X_SHADE.
10705         (struct som_submission_form) New member `header'; all users
10706         changed.
10707
10708         * val-labs.c: (get_label) User messages changed.
10709
10710         * var.h: Changed FREQUENCIES structures.
10711
10712         * vars-atr.c: (is_num_user_missing, is_str_user_missing) Made
10713         inline.
10714         
10715 Fri Jul 19 19:11:13 1996  Ben Pfaff  <blp@gnu.org>
10716
10717         * approx.h: Definition of EPSILON now depends on system's
10718         DBL_EPSILON.  Removed GNU C specific code.
10719         (cmpapx) Renamed approx_compare.
10720
10721         * frequencies.g, frequencies.q: Continued updating; still doesn't
10722         compile.
10723
10724         * groff-font.c: (name_to_index) Fix bug that kept it from
10725         compiling.
10726
10727         * hash.c, hash.h: Completed work.
10728
10729         * var.h: Changes to freq_tab, frequencies_proc.
10730         
10731 Wed Jul 17 21:23:36 1996  Ben Pfaff  <blp@gnu.org>
10732
10733         New hashing code.
10734         * hash.c, hash.h: New files.  Not completed.
10735         * Makefile.am: Added hash.c to source file list.
10736         * font.h: (struct font_desc) New member kern_size_p.
10737         * groff-font.c: Uses hash.h.
10738         (hashpjw) Moved to hash.c.
10739         (next_prime_power) Rewrote, renamed hsh_next_prime, moved to
10740         hash.c.
10741         (static var hash) New member size_p.
10742         * var.h: Includes hash.h.
10743         (struct freq_tab) Changed AVL_TREE to hash_tab.
10744
10745         * vars-prs.c: Comment, formatting fixes.
10746
10747         * frequencies.g, frequencies.q: Continued updating.  Not yet
10748         working.
10749
10750         * formats.c: Bug fix.
10751
10752 Tue Jul 16 22:10:04 1996  Ben Pfaff  <blp@gnu.org>
10753
10754         Increasing parallelism between DESCRIPTIVES and FREQUENCIES.
10755         * descript.g: Comment fixes.
10756         * descript.q: Comment fixes.  Moved some declarations into var.h.
10757         Made dsc_info a static table.  Updated FIXMEs.
10758         (internal_cmd_descriptives) Beautified.
10759         
10760         * frequencies.q: Started updating into working order.
10761         * frequencies.g: New file analogous to descript.g.
10762         * var.h: Comment fixes.  Added structures for FREQUENCIES.
10763         
10764         * som.c: Removed vestiges of crushing and partial table support.
10765
10766 Sun Jul 14 15:45:31 1996  Ben Pfaff  <blp@gnu.org>
10767
10768         * Many more changes to som.c especially, but these will not be
10769         documented as I have resolved to remove them.  This patchlevel is
10770         being released solely so that I can fall back to it if I decide
10771         that removing the changes is not a good idea.
10772
10773 Sat Jul 13 09:58:44 1996  Ben Pfaff  <blp@gnu.org>
10774
10775         * som.c: (global var som) New member `cum_y'.
10776         (build_target) Properly handles titles for partial tables.
10777         (dump_partial_beg, dump_partial_mid, dump_partial_end)
10778         Merged into single new function dump_partial().  Fixed problem
10779         with titles on partial tables.
10780         (dump_table) Calls dump_partial() for all parts of partial tables.
10781         (dump_page) Criteria for drawing title changed.
10782         
10783 Fri Jul 12 22:03:36 1996  Ben Pfaff  <blp@gnu.org>
10784
10785         * command.c: (cmd_table) Added LIST, WEIGHT.
10786
10787         * command.c: (cmd_remark) No longer frees `s' since it's not
10788         dynamically allocated.
10789         
10790         * data-out.c: (convert_f) Now correctly handles the case where
10791         abs(v->f)<1 but v->f rounds to a value of 1.00 given the specified
10792         number of decimals.
10793         (som_destroy_all_tables) Removed argument.  All callers changed.
10794         (som_vline, som_hline) Argument validity checking corrected.
10795         (som_set_value) Implemented half-heartedly.
10796         (replicate_table) Copies tables piece-by-piece when using Checker.
10797
10798         * som.h: New line style SLIN_1THIN, currently equivalent to
10799         SLIN_0.  New enum set SOM_SUB_*.
10800         (struct som_submission_form) Removed `seq_no'.  Added `type'.
10801         
10802         * list.q: Newly working file; uses partial tables.
10803         
10804         * som.c: (som_reduce_table) Renamed som_set_table_height().
10805         (som_crush) Removed argument `group'.
10806         (global var som) Removed `nt', `seq_no'.  Added `type'.
10807         (som_submit_table) Arguments changed.
10808         (output_table) Removed partial table code.
10809         (build_target) New arg; partial table support added.  All callers
10810         changed.
10811         (dump_plain_table) Removed partial table code.
10812         (dump_partial_beg, dump_partial_mid, dump_partial_end) New functions.
10813         (dump_table) Supports partial tables.
10814         (dump_page) New argument to allow not drawing top and/or bottom
10815         headers.  All callers changed.  Supports partial tables.
10816
10817 Sat Jul  6 22:22:25 1996  Ben Pfaff  <blp@gnu.org>
10818
10819         * data-out.c: Changed `#include <approx.h>' to `#include
10820         "approx.h".
10821         (convert_F) Comment fix.  Now won't print `-.000', etc.
10822
10823         * descript.q: Now Z-scores work, although there appears to
10824         be a bug (which might actually be in data-out.c:convert_F()).
10825         (descriptives_trns_proc, descriptives_trns_free) New functions.
10826         (run_z_pass) Implemented.
10827         
10828         * var.h: Comment fixes.
10829         (dsc_z_score, descriptives_trns) New structs.
10830         (descriptives_trns) Added to any_trns as `dsc'.
10831
10832         * error.c, error.h: New error class, IS (Installation Script
10833         error), used in those instances where the error is in the
10834         installation, but there is a script file or installation file that
10835         can be usefully referred to.
10836         
10837         * output.c: Change many IE classes to IS classes.
10838
10839         * cases.c, command.c, common.c, crosstabs.q, expr-evl.c,
10840         frequencies.q, list.q, vars-prs.c, vfm.c: Removed reference to
10841         HAVE_MALLOC_H because Borland C++ alloca() is broken, so why
10842         include the corresponding header?
10843         
10844         * glob.c: (init_glob) Don't malloc term_buffer under Checker.
10845         Don't bail out if termcap can't be read.
10846
10847         * som.c: (som_destroy_table) Removed.
10848         (som_reduce_table, som_destroy_all_tables) New functions.
10849         (som_crush) New function, not implemented.
10850         
10851         * som.h: New table option STAB_CRUSH.  Comment fix.  New struct
10852         som_submission_form.  Function prototypes revised.
10853
10854         Outputting huge tables (1000s of rows) a few rows at a time
10855         is supported, though untested.  May even break everything.
10856         Actually, the code doesn't even compile right now.
10857         * som.c: (struct som) New fields htv, nt, seq_no.
10858         (som_submit_table) Multiple arguments changed to a single
10859         pointer to struct submission_form.  Only increments subtable_num
10860         if seq_no is zero.  Only destroys table if it's not going to
10861         be reused.
10862         (replicate_table) New function.
10863         (output_table) Comment fix.
10864         (examine_table) Changed inline code to code calling
10865         replicate_table().  Calculates htv.  Supports partial tables.
10866         (draw_title) Removed comment.
10867         (build_target) Only allows for title on first part of partial
10868         tables.
10869         (dump_plain_table) Only resets table chunk number on first part
10870         of partial tables; FIXME: doesn't work quite right.  Supports
10871         partial tables.
10872         (dump_page) Titles only on first part of partial tables.
10873
10874 Fri Jul  5 20:16:19 1996  Ben Pfaff  <blp@gnu.org>
10875
10876         * Thanks to an unreliable IDE hard drive, I have spent the last
10877         day reconstructing my Debian GNU/Linux installation and redoing
10878         the previous day's changes--somehow I managed to save every file
10879         except for output.c and output.h.  So the following changes could
10880         really be considered independent of the output.c, output.h changes
10881         from Jul 4.
10882
10883         * output.h, output.c: Moved the outp_configure_vec global var,
10884         outp_names struct, and enum set OUTP_S_* from output.h to output.c.
10885         outp_configure_vec is now static.
10886         
10887 Thu Jul  4 20:20:24 1996  Ben Pfaff  <blp@gnu.org>
10888
10889         * The entire philosophy behind configuration of the output drivers
10890         changed.  Now there is a termcap-type configuration where drivers
10891         to be read are determined beforehand, rather than parsing the
10892         entire output init file and storing it in memory & deciding what
10893         to actually use later.  Faster & more memory-efficient at the same
10894         time, cool.
10895         
10896         * output.c: Comment fix.  Removed outp_init_drivers global var.
10897         Removed all references to synonyms.  New structure outp_defn.  New
10898         global vars outp_macros, outp_configure_vec.
10899         (search_name, delete_name, add_name, check_configure_vec,
10900         expand_name, find_defn_value) New static functions.
10901         (outp_configure_clear, outp_configure_add, outp_configure_macro,
10902         outp_read_devices) New extern functions.
10903         (outp_init) Much functionality moved into outp_read_devices.
10904         (outp_read_devices) Format of output init file changed; name of
10905         file is `devices' rather than `output' to avoid Makefile
10906         conflicts.
10907         (outp_clear) Renamed outp_done.
10908         (outp_list_classes) Bug fix, cleaned up.
10909         (outp_list_drivers) Not implemented anymore.
10910         (outp_configure_driver) Now a static function; simplified; now
10911         interpolates macros; supports new structure.
10912         (outp_enable_driver, match_synonym) Removed; all references
10913         removed.
10914         (find_driver) First argument removed.
10915         
10916         * output.h: Global var outp_init_drivers removed; new structure
10917         outp_names; new enum set OUTP_S_*; new global var
10918         outp_configure_vec; function prototypes for output.c exports
10919         updated.
10920         
10921         * main.c: (main) Calls outp_read_devices() after parsing the
10922         command line.
10923         
10924         * cmdline.c: (parse_command_line) New option -v --verbose;
10925         --version changed to -V.  --device option changed syntax to just
10926         take a single device name.  Accepts key=value declaration of
10927         output init file macros.  Syntax message updated.
10928
10929         * filename.c: (expand_line) New function.
10930         (interp_environ_vars) Renamed interp_vars; no longer uses
10931         fixed-size buffer.
10932         (blp_getenv) Allows $ARCH and $VER pseudo-environment-vars to be
10933         overridden by real environment vars.
10934         (search_path) Uses verbose_msg() instead of #ifdef'd printf().
10935         * filename.h: interp_environ_vars() renamed interp_vars().
10936         
10937         * error.c, error.h: Added extern variable `verbosity', message
10938         class MM.
10939         
10940         * error.c: (vmsg) Support message class MM.
10941         (verbose_msg) New function.
10942
10943         * descript.q: (generate_z_varname) Bug fix in generation of
10944         Z-score varnames.
10945         (dump_z_table) Bug fix in column headers.
10946         
10947         * ascii.c: (ascii_init_driver) Changed minimum number of lines per
10948         page from 29 to 15.  Don't set a default for ops[OPS_INIT,
10949         OPS_DONE].  Writes the uninit string when the driver is closed.
10950         (ascii_open_page) Write the init string before the first page.
10951         (output_shorts) Form of main loop changed from `while' to `for'.
10952         Bug fix with overstrikes: the character is printed *after* the
10953         backspace.  Eliminated a lot of `& 0xff' modifiers.
10954         (advance_to_left_margin) New function.
10955         (return_carriage, output_lines) Handle left margin.
10956
10957 Thu Jul  4 00:35:59 1996  Ben Pfaff  <blp@gnu.org>
10958
10959         * ascii.c: New option `carriage-return-style'.
10960
10961         * ascii.c: (count_fancy_chars) New function.
10962         (delineate, text_metrics) Use new function; bug fixes regarding
10963         rich text strings.
10964         (text_draw) Bug fix with rich text.
10965         (output_string, output_shorts) Reordered.
10966         (output_shorts) Now handles boxchars and some overstrike font
10967         changes.
10968         (output_char, return_carriage) New functions.
10969         (output_lines) Now handles overstriking and font changes properly;
10970         some code moved to output_shorts.
10971
10972 Tue Jul  2 22:13:23 1996  Ben Pfaff  <blp@gnu.org>
10973
10974         [GLOBAL_DEBUGGING]
10975         * ascii.c: New member `debug' in ascii_driver_ext.
10976         (ascii_init_driver, delineate) Uses new member.
10977
10978         Now you can set a vertical height on writing text.
10979         * ascii.c: (delineate) Keeps track of vertical position.
10980         (text_draw) No longer considers fully justified text an internal
10981         error.
10982         
10983         * output.h: New flag OUTP_T_VERT; other OUTP_T_ values changed.
10984
10985         Tables' titles are drawn; they can have variable height.
10986         * som.c: `som' struct has new member, title_height.
10987         (draw_title) New argument.  Moved within file.  All caller
10988         changed.
10989         (build_target) New argument, amount of space needed for first row.
10990         Calculates height of title, takes that into account.  All callers
10991         changed.
10992         (dump_plain_table, dump_columnated_table) Took calculation of y1,
10993         y2 out of loop.
10994         (dump_columnated_table) [GLOBAL_DEBUGGING] Debugging code
10995         improved.
10996         (dump_columnated_table) Organized for readability.
10997         (dump_page) Makes use of som.title_height.
10998
10999         * som.c: Many comment bug fixes.
11000
11001         * descript.q: (try_name, generate_z_name) Bug fix regarding
11002         generation of Z-score variable names.
11003         * var.h: Removed num from descriptives_proc; all referents removed.
11004
11005 Mon Jul  1 22:13:39 1996  Ben Pfaff  <blp@gnu.org>
11006
11007         * ascii.c: (ascii_line_horz, ascii_line_vert,
11008         ascii_line_intersection) Added debugging code.
11009
11010         Added a descriptive line above each table to describe it.
11011         * command.c: (parse_cmd) Calls som_new_series.
11012         
11013         * som.c: New static vars table_num, subtable_num.  New `som'
11014         member `title'.
11015         (dump_page) New arguments.
11016         (som_submit_table) Handle new variables.
11017         
11018         * som.c, som.h: (som_submit_table) New arguments.  All callers
11019         changed.
11020         (som_new_series) New function.
11021         (build_target) Makes room for extra line.
11022         (draw_title) New function.
11023         (dump_page) Calls draw_title.  Bug fix: doesn't always set
11024         som.ext->cp to 0.
11025         
11026         Columnation of tables support.
11027         * som.h: Deleted fr, lr, ri from som_table.  Reorganized.
11028         
11029         * som.c: Deleted references to fr, lr, ri.
11030         (som_columnate) Bux fix: sets group member of table.
11031         (som_add_options) Function removed.
11032         (dump_table) Split into three functions; extensively reworked.
11033         
11034         * descript.q: (dump_z_table) Better output table formatting; added
11035         title support to correspond to som.h changes.
11036         (display) Title support.
11037
11038         * output.h: Added OUTP_T_NONE.
11039         
11040 Mon Jul  1 13:00:00 1996  Ben Pfaff  <blp@gnu.org>
11041
11042         * descript.q: Improved handling of Z scores; still not perfect.
11043         
11044         * output.h, ascii.c: Added hook for getting em width of current
11045         font.
11046         
11047         * som.c: Uses new em-width hook.  Added debugging code to
11048         several functions.
11049         (som_columnate) New argument.
11050         (som_add_options) Removed.
11051
11052 Jun 29 17:40:47 1996  Ben Pfaff  <blp@gnu.org>
11053
11054         * som.h, som.c, output.c, output.h, ascii.c: Updated to work with
11055         rules as a property of the table instead of as a property of the
11056         cells.
11057         
11058         * ascii.c: Added `header' to table of options.
11059         
11060         * descript.q: Added even shorter statistic names; modified to work
11061         with new som interface.
11062         
11063         * misc.c (blp_getdelim): Bug fix.
11064         
11065         * version.c: includes 'conf.h'.
11066         
11067 ----------------------------------------------------------------------
11068 Local Variables:
11069 mode: change-log
11070 version-control: never
11071 End: