Updated ChangeLog.
[pspp-builds.git] / src / ChangeLog
1 2004-04-06  Michael Kiefte  <mkiefte@dal.ca>
2
3         * aggregate.c, crosstabs.q, descript.c, dictionary.c, frequencies.q, levene.c, t-test.q, var.h: 
4         Changed dict_get_case_weight() to accept an additional int * flag
5         to complain about system-missing, user-missing, zero, or negative
6         weights and updated existing functions to pass int * to
7         dict_get_case_weight().
8
9 2004-04-05  jmd  <jmd@gnu.org>
10
11         * main.c: Fixed configuration problems with gsl
12
13         * t-test.q: Fixed some problems encountered when compiling under Cygwin
14
15 2004-04-03  blp  <blp@gnu.org>
16
17         * lexer.c, ChangeLog:
18         Fix infinite loop on comment at end of file, add test.
19
20 2004-04-03  jmd  <jmd@gnu.org>
21
22         * settings.h, var.h, ChangeLog, Makefile.am, cmdline.c, command.c, command.h, error.h, filename.c, frequencies.q, lexer.h, main.c, q2c.c, set.q:
23         Fixed the calculation of percentiles and added --syntax and --algorithm options
24
25 Sat Apr  3 11:43:37 2004  Ben Pfaff  <blp@gnu.org>
26
27         * lexer.c: (lex_skip_comment) Handle end-of-file correctly (I
28         hope).
29
30 Sat Apr  3 15:00:18 WST 2004 John Darrington <john@darrington.wattle.id.au>
31
32         * frequencies.q:  Fixed the calculation of percentiles
33
34         * Makefile.am:  Added the --ansi flag and dealt with the
35         consequences.  Added some entries to PSPP_sources so that
36         make distcheck would pass
37
38         * cmdline.c:   Added the --syntax and --algorithm options
39
40         * q2c.c:  Added an implicit /ALGORITHM subcommand to everything.
41
42 Fri Apr  2 11:25:22 WAST 2004 John Darrington <john@darrington.wattle.id.au>
43
44         * t-test.q, levene.c, levene.h  Converted t-test (incl levene) to 
45         use the new multipass_split_... mechanism.
46
47 Wed Mar 31 22:36:22 2004  Ben Pfaff  <blp@gnu.org>
48
49         * frequencies.q: (calc_stats) Use moments data structure and
50         calc_seskew(), calc_sekurt() functions.
51
52         * set.q main.c settings.h Added support for --syntax and --algorithm 
53         options
54
55 Tue Mar 30 22:04:19 2004  Ben Pfaff  <blp@gnu.org>
56
57         * vfm.c: Had to get last call to multipass_split_output() inside
58         open_active_file()/close_active_file() pairing, so introduce new
59         function.
60         (internal_procedure) Move procedure() code here, except for calls
61         to open_active_file() and close_active_file().
62         (procedure) Wrap open_active_file() and close_active_file() around
63         internal_procedure().
64         (multipass_procedure_with_splits) Wrap open_active_file() and
65         close_active_file() around internal_procedure().
66
67 Tue Mar 30 22:01:57 2004  Ben Pfaff  <blp@gnu.org>
68
69         * descript.c: (cmd_descriptives) Free `vars' to avoid memory leak.
70
71 Mon Mar 29 16:26:40 2004  Ben Pfaff  <blp@gnu.org>
72
73         * debug.c: Removed.  Moved cmd_debug_evaluate() into expr-evl.c.
74
75         * expr-evl.c: (cmd_debug_evaluate) Moved here from debug.c.
76
77 Mon Mar 29 16:03:08 2004  Ben Pfaff  <blp@gnu.org>
78
79         * algorithm.c: By default turn off some of the more expensive
80         assertions.
81         (expensive_assert) New macro which expands to assert if
82         EXTRA_CHECKS is defined, to nothing otherwise.
83         (unique) Use expensive_assert().
84         (binary_search) Ditto.
85         (push_heap) Ditto.
86         (pop_heap) Ditto.
87         (make_heap) Ditto.
88         (sort_heap) Ditto.
89
90         * command.c: (conflicting_3char_prefixes) Words that are the same
91         don't cause conflicts when they are abbreviated to the first three
92         letters.
93
94         * expr-evl.c: (CONCAT_func) Fix memory leak by incrementing struct
95         nonterm_node's n earlier.
96         (generic_str_func) Ditto.
97         
98 Mon Mar 29 15:32:17 2004  Ben Pfaff  <blp@gnu.org>
99
100         Add support for multipass procedures.  Rewrite DESCRIPTIVES to
101         test multipass support, take advantage of new moments
102         calculation, and to not be such crappy code.  Get rid of q2c
103         processing for DESCRIPTIVES.
104
105         * vfm.c: (struct multipass_split_aux_data) New structure.
106         (multipass_procedure_with_splits) New function.
107         (multipass_split_callback) New function.
108         (multipass_split_output) New function.
109         * descript.q: Removed.
110
111         * descript.c: New file.
112
113         * var.h: Removed descriptives enums.
114         (struct descriptives_proc) Removed.
115         (struct variable) Removed p.dsc.
116
117         * Makefile.am: (q_sources_c) Remove descript.c.
118         (q_sources_q) Removed descript.q.
119         
120 Mon Mar 29 15:31:55 2004  Ben Pfaff  <blp@gnu.org>
121
122         New manager for keeping track of used workspace.
123         
124         * workspace.c: New file.
125
126         * workspace.h: New file.
127
128         * Makefile.am: (pspp_SOURCES) Add workspace.c, workspace.h.
129
130         * sort.c: (do_internal_sort) Use workspace_malloc().
131         (destroy_internal_sort) Use workspace_free().
132
133 Mon Mar 29 15:31:08 2004  Ben Pfaff  <blp@gnu.org>
134
135         New `struct casefile' for managing sets of cases.
136
137         * casefile.c: New file.
138
139         * casefile.h: New file.
140
141         * command.def: Add DEBUG CASEFILE command.
142
143         * Makefile.am: (pspp_SOURCES) Add casefile.c, casefile.h.
144
145         * sort.c: (sort_cases) Move logic for sending storage file to disk
146         into do_external_sort().
147         (struct internal_sort) Use an array of ccase pointers instead of a
148         case_list.
149         (do_internal_sort) Rewrite to handle casefiles.
150         (compare_case_list) Removed.
151         (compare_cases) New function.
152         (compare_case_dblptrs) New function.
153         (read_internal_sort_output) Deal with new struct internal_sort.
154
155         * vfm.c: (static var workspace_overflow) Removed.
156         (struct storage_stream_info) Removed all the members.  Added
157         struct casefile * member.
158         (storage_sink_open) Use casefile.
159         (open_storage_file) Removed.
160         (write_storage_file) Removed.
161         (storage_to_disk) Removed.
162         (destroy_storage_stream_info) Use casefile.
163         (storage_sink_write) Use casefile.
164         (storage_sink_make_source) Use casefile.
165         (storage_source_count) Use casefile.
166         (storage_source_read) Use casefile.
167         (storage_source_on_disk) Removed.
168         (storage_source_get_cases) Removed.
169         (storage_source_set_cases) Removed.
170         (storage_source_get_casefile) New function.
171         
172 Mon Mar 29 15:30:09 2004  Ben Pfaff  <blp@gnu.org>
173
174         New `struct moments' for calculating moments.
175
176         * stats.c: Removed.
177
178         * stats.h: Removed.
179
180         * moments.c: New file.
181
182         * moments.h: New file.
183
184         * command.def: Add DEBUG MOMENTS command.
185
186         * Makefile.am: (pspp_SOURCES) Add moments.c, moments.h.  Remove
187         stats.c, stats.h.
188
189         * aggregate.c: Modify AGGREGATE to use the new moments
190         calculation, even if not in such a great way.
191         (struct agr_var) Add `moments' member.
192         (parse_aggregate_functions) Set `moments' member to null.
193         (agr_destroy) Destroy `moments' member.
194         (accumulate_aggregate_info) Use `moments' for standard deviation.
195         (dump_aggregate_info) Ditto.
196         (initialize_aggregate_info) Create or clear `moments'.
197
198         * misc.h: Add pow2(), pow3(), pow4() functions in place of sqr(),
199         cube(), pow4() that were in stats.h.  All references updated.
200
201         * crosstabs.q: stats.h had chi-square significance functions.  Use
202         GSL instead.
203         (display_chisq) Use gsl_cdf_chisq_Q() instead of chisq_sig().
204
205         * expr-evl.c: (expr_evaluate) Use moments_of_values() for
206         OP_CFVAR, OP_MEAN, OP_SD, OP_VARIANCE.
207                 
208 Fri Mar 26 14:21:23 2004  Ben Pfaff  <blp@gnu.org>
209
210         * dictionary.c: (dict_compact_values) Compacted values need to
211         start off from 0.
212
213 Fri Mar 26 00:54:57 2004  Ben Pfaff  <blp@gnu.org>
214
215         * var-labs.c: (cmd_variable_labels) For compatibility, don't allow
216         `/' at start.  Check return value of parse_variables() for error
217         return.
218
219 Fri Mar 26 00:19:27 2004  Ben Pfaff  <blp@gnu.org>
220
221         Revamp expressions: make the code a little nicer, and fix bugs
222         found in testing.
223         
224         * expr-evl.c: (expr_evaluate) Make expression argument const.
225         Support OP_ADD, OP_SUB, OP_MUL, OP_DIV instead of OP_PLUS, OP_MUL.
226         OP_POW is missing for arg 2 <= 0.  OP_LOG is natural log, not
227         base-10 log.  Fix OP_ANY, OP_ANY_STRING, OP_RANGE, OP_RANGE_STRING
228         off-by-ones.  Add OP_MAX_STRING, OP_MIN_STRING.  Fix OP_TIME_HMS,
229         OP_DATE_WKYR boundary conditions.  Add OP_CTIME_DAYS,
230         OP_CTIME_HOURS, OP_CTIME_MINUTES, OP_CTIME_DAYS, OP_CTIME_SECONDS.
231         Support OP_INDEX_2, OP_INDEX_3, OP_RINDEX_2, OP_RINDEX_3 instead
232         of OP_INDEX, OP_INDEX_OPT, OP_RINDEX, OP_RINDEX_OPT.  Merge
233         OP_LPAD_OPT into OP_LPAD, OP_RPAD_OPT into OP_RPAD, OP_LTRIM_OPT
234         into OP_LTRIM, OP_RTRIM_OPT into OP_RTRIM, OP_NUMBER_OPT into
235         OP_NUMBER.  Fix OP_RTRIM fragility.  Support OP_SUBSTR_2,
236         OP_SUBSTR_3 instead of OP_SUBSTR, OP_SUBSTR_OPT.  Remove OP_INV.
237         Simplify OP_SYSMIS.  Remove OP_STR_MIS.
238
239         * expr-opt.c: (optimize_expression) Rewrite.
240         (macro n0) Removed.
241         (macro n1) Removed.
242         (macro n2) Removed.
243         (macro s0) Removed.
244         (macro s0l) Removed.
245         (macro s1) Removed.
246         (macro s1l) Removed.
247         (macro s2) Removed.
248         (macro s2l) Removed.
249         (macro s) Removed.
250         (macro sl) Removed.
251         (eq_num_con) New function.
252         (optimize_tree) New function.
253         (macro rnc) Removed.
254         (macro frnc) Removed.
255         (str_search) Add const to string params.
256         (str_rsearch) Ditto.
257         (evaluate_tree_no_missing) Renamed from evaluate_tree.  Add num[],
258         str[], str_len[] locals to substitute for most of removed macros.
259         Support OP_ADD, OP_SUB, OP_MUL, OP_DIV instead of OP_PLUS, OP_MUL.
260         Removed support for missing values because we're never called with
261         missing values.  Use set_number() or set_number_errno() instead of
262         rnc or frnc.  Removed any stuff that caused trouble in testing.
263         We can re-add it later if it really slows anything.  Fix some
264         random problems.
265         (evaluate_tree_with_missing) Not yet supported.  To be added later
266         if it's important.
267         (repl_num_con) Removed.
268         (collapse_node) New function.
269         (force_repl_num_con) Removed.
270         (set_number) New function.
271         (set_number_errno) New function.
272         (repl_str_con) Removed.
273         (set_string) New function.
274         (yrmoda) Tighten boundary conditions.  Adopt 2030 cut-off for
275         2-digit years.
276         (dump_node) No special case for OP_AND, OP_OR.
277
278         * expr-prs.c: (expr_prs) Honor EXPR_NO_OPTIMIZE bit.  Rewrite.
279         (expr_get_type) New function.
280         (type_check) Rewrite.
281         (type_coercion) New function.
282         (struct operator) New structure.
283         (match_operator New function.
284         (parse_binary_operators) New function.
285         (parse_inverting_unary_operator) New function.
286         (parse_or) Rewritten.
287         (parse_and) Rewritten.
288         (parse_not) Rewritten.
289         (parse_rel) Rewritten.
290         (parse_add) Rewritten.
291         (parse_mul) Rewritten.
292         (parse_neg) Rewritten.
293         (parse_exp) Rewritten.
294         (parse_sysvar) Add $TRUE, $FALSE system variables.
295         Get $LENGTH, $WIDTH from get_viewlength(), get_viewwidth().
296         (parse_primary) Use allocate_var_node(), allocate_num_con(),
297         allocate_str_con().
298         (struct function) Remove desc, change `func' prototype.
299         (unary_func) Remove special cases.
300         (MISSING_func) Reduce to unary_func() that just returns a boolean.
301         (SYSMIS_func) Handle SYSMIS((x)) like SYSMIS(x).
302         (VALUE_func) Use allocate_var_node().
303         (nary_num_func) Allow MIN and MAX for strings.
304         Use allocate_var_node().  Properly clean up.
305         Fix return type.
306         (generic_str_func) Use local table instead of removed `desc'
307         member.  Mostly rewrite.
308         (get_num_args) Revise error message.
309         (parse_function) Return EXPR_ERROR, not 0 on error.
310         (macro op) Removed.
311         (macro varies) Removed.
312         (ops[]) Use expr.def.
313         (free_node) Do nothing if node is null.
314         (allocate_num_con) New function.
315         (allocate_str_con) New function.
316         (allocate_var_node) New function.
317         (allocate_binary_nonterminal) New function.
318         (append_nonterminal_arg) Removed.
319         (static var func_tab[]) Revised.
320         (expr_debug_print_postfix) Make parameter const.
321         Use printf() instead of debug_printf().
322
323         * expr.def: New file.
324         
325         * expr.h: Change PXP_* to EXPR_*, all references updated.  Also
326         use named enum instead of unnamed, all references updated.  Add
327         EXPR_ANY, EXPR_NO_OPTIMIZE.
328
329         * exprP.h: Remove EX_*.  Add DEFINE_OPERATOR.  Use expr.def
330         instead of defining OP_* directly.
331         (macro IS_TERMINAL) New macro.
332         (macro IS_NONTERMINAL) New macro.
333         (enum OP_NO_FLAGS) New.
334         
335 Fri Mar 26 00:18:01 2004  Ben Pfaff  <blp@gnu.org>
336
337         * error.c: (err_assert_fail) msg variable needs to be non-const.
338
339 Fri Mar 26 00:17:24 2004  Ben Pfaff  <blp@gnu.org>
340
341         * debug.c: (cmd_debug_evaluate) Rewrite.
342
343 Fri Mar 26 00:15:13 2004  Ben Pfaff  <blp@gnu.org>
344
345         Fix some CROSSTABS bit rot stupidity.
346
347         * crosstabs.q: Reorder the CELLS subcommands for compatibility.
348         (internal_cmd_crosstabs) Initializes cells[] correctly.
349         (float_M_suffix) Rename format_cell_entry(), change prototype,
350         rewrite.
351         (display_crosstabulation) Fix cell formatting.
352
353 Fri Mar 26 00:14:09 2004  Ben Pfaff  <blp@gnu.org>
354
355         Make lex_rest_of_line(), lex_entire_end() not discard lines.  Have
356         to call lex_discard_line() to do that.
357
358         * command.c: (run_command) Call lex_discard_line() after
359         lex_rest_of_line().
360
361         * lexer.c: (lex_entire_end) Change behavior.
362         (lex_rest_of_line) Change behavior.  Return const char *.
363         (lex_discard_line) Don't clear getl_buf, don't emit message.
364
365         * main.c: (handle_error) Emit message here.
366
367         * repeat.c: (internal_cmd_do_repeat) Use lex_discard_line()
368         instead of lex_entire_line().
369
370         * str.c: (mm_find_reverse) Make length params size_t.  Rewrite.
371
372         * title.c: (get_title) Call lex_discard_line() after
373         lex_rest_of_line().
374         (cmd_file_label) Ditto.
375         (cmd_document) Deal with const char * return value.
376
377 Fri Mar 26 00:10:16 2004  Ben Pfaff  <blp@gnu.org>
378
379         Removed REMARK command.
380
381         * command.c: (extract_prefix) Removed.
382         (output_line) Removed.
383         (cmd_remark) Removed.
384
385         * command.def: Remove REMARK.
386
387 Fri Mar 26 00:08:38 2004  Ben Pfaff  <blp@gnu.org>
388
389         Added abort() after lots of assert(0) invocations to avoid some
390         compiler warnings.  We really need a NOT_REACHED macro.
391
392 Tue Mar 23 08:00:42 WAST 2004 John Darrington <john@darrington.wattle.id.au>
393
394         * sort.c: Added missing call to temp_file_close.  Changed error 
395         messages to warnings.
396
397         * set.q: Improved setting of set_view{length,width} to be more tolerant
398         of buggy OSes.
399
400 Sun Mar 21 10:11:14 WST 2004 John Darrington <john@darrington.wattle.id.au>
401
402         * val-labs.c: Fixed a bug where PSPP would crash, if VALUE LABELS was
403         used with incorrect syntax.
404
405         * error.c, error.h et al:  Overridden definition of assert for a
406         custom one.
407
408         * test-q.c: Fixed a buglet where it would crash if no /VARIABLES
409         subcommand was given when it ought to have been.
410
411 Sat Mar 20 22:19:08 2004  Ben Pfaff  <blp@gnu.org>
412
413         * tab.c: (tab_vline) Fix assertions to respect row_ofs and
414         col_ofs.
415         (tab_hline) Ditto.
416         (tab_box) Ditto.
417         (tab_joint_text) Ditto.
418
419 Sat Mar 20 17:57:23 2004  Ben Pfaff  <blp@gnu.org>
420
421         * levene.c: Add #include.
422
423         * set.q: (set_viewport) Add `int' argument to make its prototype
424         correct for signal().
425
426 Sat Mar 20 15:35:17 2004  Ben Pfaff  <blp@gnu.org>
427
428         * expr-evl.c: (expr_evaluate) Assert that `c' is nonzero before
429         using it.
430
431 Sat Mar 20 15:18:16 2004  Ben Pfaff  <blp@gnu.org>
432
433         Changed DFM from open-at-first-access to explicit-open.  Before,
434         calling dfm_get_record() or dfm_put_record() would automatically
435         open the file.  Now, you have to call dfm_open_for_reading() or
436         dfm_open_for_writing() explicitly.  This makes it possible to
437         check permissions, file existence, etc. earlier.
438
439         Also made struct file_handle more opaque, and clean up in general.
440
441         * data-list.c: (cmd_data_list) Open handle for reading.
442
443         * dfm.c: (struct dfm_fhuser_ext) Add `where', `saw_begin_data'
444         members.
445         (open_file_r) Renamed dfm_open_for_reading(), rewrote.
446         (open_file_w) Renamed dfm_open_for_writing(), rewrote.
447         (open_inline_file) Removed.
448         (read_record) For inline_file, if we haven't seen BEGIN DATA, read
449         it.  Deal with line_number in extension record instead of file
450         handle.
451         (dfm_get_record) Rewrote.
452         (dfm_put_record) Rewrote.
453         (dfm_push) Assert file is open and one of ours.  Deal with
454         line_number in extension record instead of file handle.
455         (dfm_pop) Assert file is open and one of ours.  Deal with
456         line_number in extension record instead of file handle.
457         (cmd_begin_data) Use dfm_open_for_reading().  Mark that we saw
458         BEGIN DATA.     
459
460         * file-handle.h: (enum constants RH_RF_*) Removed.
461         (enum constants FH_MD_*) Removed.
462         (struct file_handle) Removed `name', `norm_fn', `fn', `where',
463         `recform', `lrecl', `mode' members.  Public references to
464         `recform' changed to use handle_get_mode(), references to `lrecl'
465         changed to use handle_get_record_width().  Added `private' member.
466         (enum file_handle_mode) New.
467
468         * file-handle.q: (struct private_file_handle) New structure.
469         (struct file_handle_list) New structure.
470         (static var files) New.
471         (static var file_handles) Removed.
472         (init_file_handle) Removed.
473         (create_file_handle) Removed.
474         (get_handle_with_name) New function.
475         (get_handle_for_filename) New function.
476         (cmd_file_handle) Rewritten.
477         (hash_file_handle) Removed.
478         (cmp_file_handle) Removed.
479         (fh_init_files) Rewritten.
480         (fh_parse_file_handle) Rewritten.  Allows identifiers as
481         filenames.
482         (fh_get_handle_by_name) Renamed handle_get_name(), all references
483         updated.  Rewritten.
484         (fh_get_handle_by_filename) Renamed handle_get_filename(), all
485         references updated.  Rewritten.
486         (fh_record_width) Renamed handle_get_record_width(), all
487         references updated.  Rewritten.
488         (handle_get_mode) New function.
489
490         * file-type.c: (cmd_file_type) Open handle for reading.
491
492         * filename.c: [unix] (struct file_identity) New structure.
493         [unix] (fn_get_identity) New function.
494         [unix] (fn_free_identity) New function.
495         [unix] (fn_compare_file_identities) New function.
496         [!unix] (struct file_identity) New structure.
497         [!unix] (fn_get_identity) New function.
498         [!unix] (fn_free_identity) New function.
499         [!unix] (fn_compare_file_identities) New function.
500
501         * lexer.c: (static var put) Renamed put_token, all references
502         updated.
503         (static var put_tokstr) New.
504         (static var put_tokval) New.
505         (lex_init) Initialize put_tokstr().
506         (restore_token) New function.
507         (save_token) New function.
508         (lex_get) Use restore_token().
509         (lex_put_back) Use save_token().
510         (lex_put_back_id) New function.
511         (lex_put_forward) Removed.
512         (lex_preprocess_line) Set put_token instead of using
513         lex_put_forward().
514         (lex_negative_to_dash) Use save_token(), set put_token directly.
515         (dump_token) Use stderr instead of stdout.
516
517         * main.c: (main) Remove call to cmd_init().
518         
519         * matrix-data.c: (cmd_matrix_data) Open file for reading.
520
521         * pfm-read.c: Use handle_get_filename() instead of trying to use
522         h->fn directly, all over.
523
524         * pfm-write.c: Ditto.
525
526         * print.c: (internal_cmd_print) Open handle for writing.
527         (dump_table) Use handle_get_filename().
528         (print_trns_proc) Use handle_get_mode().
529         (cmd_print_space) Use fh_parse_file_handle().
530         Open handle for writing.
531         [0] (debug_print) Removed.
532
533         * sfm-read.c: Use handle_get_filename() instead of trying to use
534         h->fn directly, all over.
535
536         * sfm-write.c: Ditto.
537
538 Sat Mar 20 14:35:48 2004  Ben Pfaff  <blp@gnu.org>
539
540         Fix memory leaks.
541         
542         * autorecode.c: (arc_free) Free arc->src_values.
543
544         * error.c: (msg) Free buf.
545
546         * val-labs.c: (do_value_labels) Always free vars.
547
548         * vfm.c: (close_active_file) If sink has no make_source then call
549         its destroy function.
550
551 Sat Mar 20 14:00:24 2004  Ben Pfaff  <blp@gnu.org>
552
553         Fixed cmd_parse() so that it always skips past a full command
554         name.  A few special commands for which this would be bad get
555         special treatment.  This lets us drop code for skipping past the
556         end of a command name in most cmd_*() functions.  It's not worth
557         listing all the commands affected.
558
559         * command.c: (struct command) Remove `cmd' member, replace by
560         `name' member, all references updated.  Remove `word', `next',
561         `skip_entire_name' members.
562         (macro DEFCMD) Deal with revised `struct command'.
563         (macro UNIMPL) Ditto.
564         (macro SPCCMD) New macro for commands whose last word shouldn't be
565         skipped.
566         (static array cmd_table[]) Make const, rename `commands', remove
567         sentinel element.
568         (macro COMMAND_CNT) New macro.
569         (split_words) Removed.
570         (cmd_init) Removed.
571         (FILE_TYPE_okay) Make parameter const.
572         (cmd_parse) Improve error messages.
573         (match_strings) New function.
574         (next_word) New function.
575         (enum command_match) New enum.
576         (conflicting_3char_prefixes) New function.
577         (conflicting_3char_prefix_command) New function.
578         (cmd_match_words) New function.
579         (count_matching_commands) New function.
580         (get_command_name) New function.
581         (free_words) New function.
582         (unknown_command_error) New function.
583         (figure_out_command) Renamed parse_command_name(), rewritten.
584
585         * command.def: Removed @ command.  Marked BEGIN DATA, DOCUMENT,
586         FILE LABEL, REMARK, SUBTITLE, TITLE as special.  Renamed EVALUATE
587         to DEBUG EVALUATE.  Added N alias for N OF CASES, SORT alias for
588         SORT CASES.
589
590         * command.h: (macro SPCCMD) New.
591
592         * include.c: (cmd_include_at) Removed.
593         (cmd_include) Allow identifier to be used as filename.
594
595         * inpt-pgm.c: (cmd_reread) Use fh_parse_file_handle().
596
597         * t-test.q: (cmd_t_test) Command name is now parsed for us.
598         
599
600 Sat Mar 20 13:56:00 2004  Ben Pfaff  <blp@gnu.org>
601
602         Start work on better test framework.
603         
604         * Makefile.am: (pspp_sources) Add debug.c.
605         
606         * debug.c: New file.
607
608         * compute.c: (cmd_evaluate) Moved to debug.c, renamed
609         cmd_debug_evaluate().
610
611         * expr-prs.c: (expr_parse) Remove PXP_DUMP support.
612
613         * expr.h: (enum constant PXP_DUMP) Removed.
614
615 Sat Mar 20 00:05:42 WST 2004 John Darrington <john@darrington.wattle.id.au>
616
617         * set.q:  Implemented the SHOW command, and synced it to the existing 
618         SET cmd.
619
620         Added a handler for SIGWINCH so that viewlength and viewwidth follow
621         changes as the window size is changed.
622
623         Added fallback to set viewlength and viewwidth from LINES and COLUMS
624         environment variables if other methods are not available.
625
626         glob.c: Removed a lot of global variables from glob.c and encapsulated 
627         them in set.q
628
629         random.c: Tidied up the way the random seed is set.
630
631         str.c: Added a ds_vprintf function.
632
633         error.c: Extended dump_message so that messages are always broken at
634         '\n' characters.
635         
636 Thu Mar 18 11:07:14 2004  Ben Pfaff  <blp@gnu.org>
637
638         * pfm-write.c: (bufwrite) Write out the correct element for string
639         variables.  From Andreas Streichardt <streichardt@globalpark.de>.
640
641 Mon Mar 15 20:48:03 2004  Ben Pfaff  <blp@gnu.org>
642
643         Get rid of static and global (!) vars in matrix-data.c.
644
645         * matrix-data.c: (static var nr_data) Removed.
646         (static var nr_factor_values) Removed.
647         (static var max_cell_index) Removed.
648         (static var split_values) Removed.
649         (struct nr_aux_data) New structure.
650         (read_matrices_without_rowtype) Use a local struct nr_aux_data in
651         place of static vars, pass to create_case_source() and procedure()
652         as aux data.
653         (nr_read_data_lines) Use struct nr_aux_data * parameter instead of
654         struct matrix_data_pgm *.
655         (nr_read_splits) Ditto.
656         (nr_read_factors) Ditto.
657         (nr_output_data) Ditto.
658         (static var wr_content) Removed.
659         (global var wr_data) Removed.
660         (global var wr_current) Removed.
661         (struct wr_aux_data) New structure.
662         (read_matrices_with_rowtype) Use a local struct wr_aux_data in
663         place of static vars, pass to create_case_source() and procedure()
664         as aux data.
665         (matrix_data_read_with_rowtype) Use struct wr_aux_data * parameter
666         instead of matrix_data_pgm *.
667         (wr_read_splits) Ditto.
668         (wr_output_data) Ditto.
669         (wr_read_rowtype) Ditto.
670         (wr_read_factors) Ditto.
671         (wr_read_indeps) Ditto.
672         
673 Mon Mar 15 20:07:29 2004  Ben Pfaff  <blp@gnu.org>
674
675         Get rid of static vars in autorecode.c.
676
677         * autorecode.c: (struct autorecode_trns) Rename `arc' to `specs',
678         `n_arc' to `spec_cnt'.  All references updated.
679         (static var v_src) Removed.
680         (static var v_dest) Removed.
681         (static var h_trns) Removed.
682         (static var nv_src) Removed.
683         (static var descend) Removed.
684         (static var print) Removed.
685         (enum direction) New enum.
686         (struct autorecode_pgm) New structure.
687         (cmd_autorecode) Use struct autorecode_pgm instead of static vars.
688         Move n_dest local var into struct autorecode_pgm for ease of
689         clean-up.  Use arc_free().
690         (arc_free) New function.
691         (recode) Modify to take struct autorecode_pgm * parameter instead
692         of using statics.  Let the caller clean up.
693         (autorecode_proc_func) Use struct autorecode_pgm * auxiliary data
694         instead of statics.  Rearrange code a little.
695
696 Mon Mar 15 00:25:02 2004  Ben Pfaff  <blp@gnu.org>
697
698         Get rid of static, global vars in recode.c.  Remove debug code.
699
700         * recode.c: (static var head) Removed.
701         (global var v) Removed.
702         (global var nv) Removed.
703         (cmd_recode) New local variables head, v, nv.  Initialize and free
704         v.  Don't call debug_print().
705         [DEBUGGING] (dump_dest) Removed.
706         [DEBUGGING] (debug_print) Removed.
707
708 Mon Mar 15 00:14:49 2004  Ben Pfaff  <blp@gnu.org>
709
710         Get rid of static vars in expr-opt.c.
711
712         * expr-opt.c: (static var e) Removed.
713         (static var nop) Removed.
714         (static var mop) Removed.
715         (static var ndbl) Removed.
716         (static var mdbl) Removed.
717         (static var nstr) Removed.
718         (static var mstr) Removed.
719         (static var nvars) Removed.
720         (static var mvars) Removed.
721         (struct expr_dump_state) New structure.
722         (dump_expression) Use new struct expr_dump_state instead of static
723         vars and pass to functions we call.
724         (dump_node) Use struct expr_dump_state * parameter.
725         (emit) Ditto.
726         (emit_num_con) Ditto.
727         (emit_str_con) Ditto.
728         (emit_var) Ditto.
729         
730 Mon Mar 15 00:03:51 2004  Ben Pfaff  <blp@gnu.org>
731
732         Get rid of static var in COUNT.
733
734         * count.c: (static var head) Move into cmd_count().
735         (cmd_count) [DEBUGGING] Don't call debug_print.
736         [DEBUGGING] (debug_print) Removed.
737
738 Sun Mar 14 23:56:09 2004  Ben Pfaff  <blp@gnu.org>
739
740         Get rid of static vars in VALUE LABELS, ADD VALUE LABELS.
741
742         * val-labs.c: (static var v) Removed.
743         (static var nv) Removed.
744         [DEBUGGING] (debug_print) Removed.
745         (verify_val_labs) Add struct variable **, int parameters.
746         (get_label) Ditto.  Improve error messages, streamline.
747         (erase_labels) New function for erasing value labels, taking over
748         part of verify_val_labs()'s function.
749         (init) Removed.
750         (done) Removed.
751         (cmd_value_labels) No need to call init() or done() anymore.
752         (cmd_add_value_labels) Ditto.
753         (do_value_labels) Add vars, var_cnt local variables.  Clean up
754         after them internally.  Call erase_labels() if we should.  Don't
755         call debug_print().
756
757 Sun Mar 14 23:33:53 2004  Ben Pfaff  <blp@gnu.org>
758
759         Get rid of static vars in MATCH FILES.
760         
761         * get.c: (static var mtf_head) Removed.
762         (static var mtf_tail) Removed.
763         (static var mtf_by) Removed.
764         (static var mtf_n_by) Removed.
765         (static var mtf_master) Removed.
766         (static var mtf_seq_num) Removed.
767         (static var mtf_seq_nums) Removed.
768         (static var mtf_sink) Removed.
769         (static var mtf_case) Removed.
770         (struct mtf_proc) New structure.
771         (cmd_match_files) Use struct mtf_proc instead of static vars.
772         (mtf_processing_finish) Ditto.
773         (mtf_free) Ditto.
774         (mtf_delete_file_in_place) Ditto.
775         (mtf_read_nonactive_records) Ditto.
776         (mtf_compare_BY_values) Ditto.
777         (mtf_processing) Ditto.
778         (mtf_merge_dictionary) Ditto.
779
780 Sun Mar 14 22:48:12 2004  Ben Pfaff  <blp@gnu.org>
781
782         * command.def: Add CASESTOVARS, VARSTOCASES unimplemented commands.
783
784         * dictionary.c: (dict_rename_var) Add assertion.
785         (dict_contains_var) Check by index instead of name.
786
787 Sun Mar 14 22:01:02 2004  Ben Pfaff  <blp@gnu.org>
788
789         Get rid of compaction_necessary, compaction_nval, compaction_case.
790         Redo VFM interface.  Replace disk_sink and memory_sink by
791         storage_sink, disk_source and memory_source by storage_source.
792
793         * vfm.h: (struct case_sink) Add `dict', `idx_to_fv', `value_cnt'
794         members.
795
796         * vfm.c: 
797         (struct write_case_data) Remove `begin_func', `end_func',
798         `func_aux' members.  Add `aux', `trns_case', `sink_case',
799         `cases_written', `cases_analyzed' members.
800         (global var compaction_necessary) Make static.
801         (global var compaction_nval) Removed.
802         (global var compaction_case) Removed.
803         (static var case_count) Removed.
804         (struct procedure_aux_data) Removed.
805         (struct split_aux_data) Removed.
806         (procedure) Remove begin_func, end_func parameters.  Rewrite.
807         (static var not_canceled) Removed.
808         (process_active_file) Removed.
809         (process_active_file_write_case) Removed.
810         (process_active_file_output_case) Removed.
811         (prepare_for_writing) Moved into open_active_file().
812         (arrange_compaction) Ditto.
813         (setup_lag) Ditto.
814         (open_active_file) Rewrote.
815         (write_case) New function.
816         [DEBUGGING] (index_to_varname) Removed.
817         (execute_transformations) New function.
818         (exclude_this_case) Renamed filter_case(), changed interface.
819         (clear_case) Added struct ccase * parameter to interface.
820         (close_active_file) Added struct write_case_data * parameter,
821         rewrote.
822         (disk_sink_create) Removed.
823         (disk_sink_destroy) Removed.
824         (disk_sink_make_source) Removed.
825         (disk_sink_write) Removed.
826         (disk_source_count) Removed.
827         (disk_source_destroy) Removed.
828         (disk_source_read) Removed.
829         (global var disk_sink_class) Removed.
830         (global var disk_source_class) Removed.
831         (global var memory_sink_class) Removed.
832         (global var memory_source_class) Removed.
833         (memory_sink_create) Removed.
834         (memory_sink_destroy) Removed.
835         (memory_sink_make_source) Removed.
836         (memory_sink_write) Removed.
837         (memory_source_count) Removed.
838         (memory_source_destroy) Removed.
839         (memory_source_get_cases) Removed.
840         (memory_source_read) Removed.
841         (memory_source_set_cases) Removed.
842         (struct disk_stream_info) Removed.
843         (struct memory_sink_info) Removed.
844         (struct memory_source_info) Removed.
845         (write_active_file_to_disk) Removed.
846         (destroy_storage_stream_info) New function.
847         (global var null_sink_class) New var.
848         (global var storage_sink_class) New var.
849         (global var storage_source_class) New var.
850         (open_storage_file) New function.
851         (storage_sink_destroy) New function.
852         (storage_sink_make_source) New function.
853         (storage_sink_open) New function.
854         (storage_sink_write) New function.
855         (storage_source_count) New function.
856         (storage_source_destroy) New function.
857         (storage_source_get_cases) New function.
858         (storage_source_on_disk) New function.
859         (storage_source_read) New function.
860         (storage_source_set_cases) New function.
861         (storage_source_to_disk) New function.
862         (storage_to_disk) New function.
863         (struct storage_stream_info) New structure.
864         (write_storage_file) New function.
865         (procedure_write_case) Removed.
866         (create_case_source) Add `struct dictionary *' parameter, all
867         references updated.
868         (create_case_sink) Ditto.
869         (free_case_sink) New function.
870         (struct split_aux_data) New structure.
871         (procedure_with_splits) New function implementing what procedure()
872         used to.
873         (SPLIT_FILE_proc_func) Removed.
874         (procedure_with_splits_callback) New function.
875         (equal_splits) New function.
876         
877         * aggregate.c: Pass around a struct instead of using statics.
878         (static var outfile) Remove.
879         (enum type) Give it tag `missing_treatment'.
880         (static var missing) Remove.
881         (static var sort) Remove.
882         (static var agr_first) Remove.
883         (static var agr_next) Remove.
884         (static var case_count) Remove.
885         (static var prev_case) Remove.
886         (static var buf64_1xx) Remove.
887         (static var buf_1xx) Remove.
888         (struct agr_proc) New structure incorporating the above.
889         (cmd_aggregate) Use new struct.  Clean up error handling using
890         agr_destroy().  Completely rewrite actual implementation of
891         aggregation.
892         (create_sysfile) Add struct agr_proc * parameter, modify
893         accordingly.
894         (parse_aggregate_functions) Ditto.
895         (free_aggregate_functions) Ditto.  Rename agr_destroy().
896         (aggregate_single_case) Add struct agr_proc * parameter, modify
897         accordingly.
898         (accumulate_aggregate_info) Ditto.
899         (dump_aggregate_info) Ditto.
900         (initialize_aggregate_info) Ditto.
901         (agr_00x_trns_proc) Removed.
902         (agr_00x_end_func) Removed.
903         (agr_10x_trns_proc) Removed.
904         (agr_10x_trns_free) Removed.
905         (agr_10x_end_func) Removed.
906         (agr_11x_read) Removed.
907         (agr_11x_finish) Removed.
908         [DEBUGGING] (debug_print) Removed.
909         (write_case_to_sfm) Add struct agr_proc * parameter, modify
910         accordingly.
911         (agr_to_active_file) New function.
912         (presorted_agr_to_sysfile) New function.
913         (sort_agr_to_sysfile) New function.
914
915         * autorecode.c: (cmd_autorecode) Use procedure_with_splits().
916
917         * crosstabs.q: (internal_cmd_crosstabs) Ditto.
918
919         * descript.q: (cmd_descriptives) Ditto.
920
921         * dfm.c: (cmd_begin_data) Check for storage_source_class.  Adapt
922         to new procedure() interface.
923
924         * command.c: (cmd_execute) Adapt to new procedure() interface.
925
926         * dictionary.c: (dict_compact_values) Also delete scratch
927         variables.
928         (dict_get_compacted_value_cnt) New function.
929         (dict_get_compacted_idx_to_fv) New function.
930
931         * flip.c: (cmd_flip) Warn about and cancel TEMPORARY.
932         (cmd_flip) Adapt to new procedure() interface.
933         (flip_sink_write) Use sink->idx_to_fv.
934
935         * frequencies.q: (internal_cmd_frequencies) Use
936         procedure_with_splits().
937
938         * get.c: (cmd_save_internal) Adapt to new procedure() interface.
939         (static var mtf_sink) New static var.
940         (static var mtf_case) New static var.
941         (cmd_match_files) Warn about and cancel TEMPORARY.  Redo the way
942         we actually implement the matching.
943         (mtf_delete_file_in_place) Use mtf_case.
944         (mtf_processing) Use mtf_case and mtf_sink.
945         (cmd_export) Adapt to new procedure() interface.
946
947         * levene.c: (levene) Use procedure_with_splits().
948
949         * list.q: (cmd_list) Use procedure_with_splits().
950
951         * matrix-data.c: (read_matrices_without_rowtype) Adapt to new
952         procedure() interface.
953         (read_matrices_with_rowtype) Ditto.
954
955         * modify-vars.c; (cmd_modify_vars) Warn about and cancel
956         TEMPORARY.  Adapt to new procedure() interface.
957
958         * rename-vars.c: Warn about and cancel TEMPORARY.
959
960         * sort.c: (cmd_sort_cases) Warn about TEMPORARY.
961         (sort_cases) Use dict_get_compacted_value_cnt() instead of
962         compaction_nval.  Adapt to new procedure() interface.  Use
963         storage_source_to_disk().
964         (do_internal_sort) Don't try to dump the cases to memory.
965         (compare_case_lists) Pass null idx_to_fv.
966         (struct initial_run_state) Add `idx_to_fv' member.  Remove
967         `case_size' member.
968         (write_initial_runs) Don't initialize irs->case_size.  Adapt to
969         new procedure() interface.  Reset irs->idx_to_fv after calling
970         procedure().
971         (sort_sink_write) Set irs->idx_to_fv.  Use case_size from struct
972         sort_cases_pgm.  Pass irs, not struct sort_cases_pgm to
973         push_heap().
974         (destroy_initial_run_state) Don't dereference irs after freeing
975         it.
976         (allocate_cases) Don't calculate case_size locally.
977         (compare_record) Add idx_to_fv parameter.
978         (compare_record_run) Change parameter from struct sort_cases_pgm *
979         to struct initial_run_state *.  Pass irs->idx_to_fv to
980         compare_record().
981         (compare_record_run) Third parameter now a struct
982         initial_run_state *.
983         (output_record) No need for out_case anymore.  Pass irs, not
984         struct sort_cases_pgm to pop_heap().  Use case_size from struct
985         sort_cases_pgm.
986         (merge) Use case_size from struct sort_cases_pgm.
987         (merge_once) Use case_size from struct sort_cases_pgm.
988         Pass null pointer to compare_record() as idx_to_fv.
989         (global var sort_sink_class) Make static.
990
991         * t-test.q: (cmd_t_test) Use procedure_with_splits().
992
993         * temporary.c: Remove debugging crap.
994
995 Sat Mar 13 14:19:52 WST 2004 John Darrington <john@darrington.wattle.id.au>
996
997         * t-test.q, levene.c: Fixed up the handling of MISSING values
998         int the T-TEST
999
1000 Fri Mar 12 16:23:35 WST 2004 John Darrington <john@darrington.wattle.id.au>
1001
1002         * t-test.q, levene.c: Added support for T-TEST /GROUP where only 
1003         one value is given.
1004
1005 Wed Mar 10 23:25:13 2004  Ben Pfaff  <blp@gnu.org>
1006
1007         Change explicit variable name checks into use of
1008         dict_class_from_id().
1009
1010         * dictionary.c: (dict_create_var)  Change explicit variable name
1011         check into use of dict_class_from_id().
1012
1013         * get.c: (trim_dictionary) Ditto.
1014
1015         * sel-if.c: (cmd_filter) Ditto.
1016
1017         * sysfile-info.c: (cmd_display) Ditto.
1018
1019         * vars-prs.c: (parse_DATA_LIST_vars) Ditto.
1020
1021         * vfm.c: (arrange_compaction) Ditto.
1022
1023         * weight.c: (cmd_weight) Ditto.
1024
1025 Wed Mar 10 21:16:34 2004  Ben Pfaff  <blp@gnu.org>
1026
1027         * temporary.c: (cmd_temporary) When TEMPORARY was the first
1028         transformation following the input program, if any, for some
1029         reason we special-cased f_trns.  That's just wrong.  It should
1030         always be set to n_trns.
1031
1032 Tue Mar  9 23:44:40 2004  Ben Pfaff  <blp@gnu.org>
1033
1034         * format.c: (parse_format_specifier_name) Fix brown-bag bug
1035         introduced in last check-in.
1036
1037 Tue Mar  9 23:10:41 2004  Ben Pfaff  <blp@gnu.org>
1038
1039         * format.c: (global array translate_fmt[]) Removed.
1040         (translate_fmt) New function as replacement.
1041         (parse_format_specifier_name) Rewrite.
1042
1043         * pfm-read.c: (convert_format) Use translate_fmt() instead of
1044         translate_fmt[].
1045
1046         * sfm-read.c: (parse_format_spec) Ditto.
1047
1048         * postscript.c: (text) Fix handling of fonts with missing
1049         ligatures.
1050
1051         * sort.c: (struct external_sort) Add temp_name member.
1052         (destroy_external_sort) Free temp_dir, temp_name members.
1053         (init_external_sort) Allocate temp_name.
1054         (get_temp_file_name) Change prototype.
1055         (open_temp_file) Deal with change to get_temp_file_name().
1056         (close_temp_file) Ditto.
1057         (remove_temp_file) Ditto.
1058         (write_temp_file) Ditto.
1059         (read_temp_file) Ditto.
1060         (sort_sink_destroy) Removed.
1061         (sort_sink_class) Change destroy member to null.
1062
1063 Tue Mar  9 22:36:34 2004  Ben Pfaff  <blp@gnu.org>
1064
1065         Eliminate temp_case.
1066
1067         * aggregate.c: (cmd_aggregate) No need to save/restore temp_case
1068         anymore.  Use agr_11x_finish().
1069         (aggregate_single_case) Make first param const.
1070         (accumulate_aggregate_info) Ditto.
1071         (agr_00x_end_func) Use compaction_case, not temp_case.
1072         (agr_11x_func) Break into agr_11x_read(), agr_11x_finish().
1073
1074         * data-list.c: (struct data_list_pgm) Add `case_size' member.
1075         (cmd_data_list) Initialize case_size.
1076         (read_from_data_list_fixed) Add struct ccase * param, use instead
1077         of temp_case.
1078         (read_from_data_list_free) Ditto.
1079         (read_from_data_list_list) Ditto.
1080         (read_one_case) Rename data_list_trns_proc(), all references
1081         updated.  Add argument in calling above functions.  Use c
1082         argument instead of temp_case.
1083         (destroy_dls) Rename data_list_trns_free(), all references
1084         updated.
1085
1086         * expr-evl.c: (expr_evaluate) Make second parameter const.
1087
1088         * file-type.c: (struct file_type_pgm) Add `case_size' member.
1089         (cmd_end_file_type) Initialize `case_size'.
1090         (file_type_source_read) Add struct ccase * parameter.  Use instead
1091         of temp_case.
1092
1093         * flip.c: Rewritten.
1094
1095         * get.c: (struct get_pgm) New structure to keep track of
1096         case_size.
1097         (cmd_get) Initialize case_size.
1098         (cmd_import) Ditto.
1099         (get_source) Deal with struct get_pgm.
1100         (get_source_read) Add struct ccase * parameter, use instead of
1101         temp_case.
1102         (import_source_read) Ditto.
1103
1104         * get.c: Use a null pointer instead of temp_case to represent the
1105         "current case" in a struct mtf_file's input member.
1106         (mtf_processing_finish) Pass null to mtf_processing(), not
1107         temp_case.
1108         (mtf_read_nonactive_records) Don't set iter->input to temp_case.
1109         (mtf_compare_BY_values) Add extra arg, use instead of null input
1110         members.
1111         (mtf_processing) Use c parameter instead of temp_case.  Pass
1112         compaction_case to process_active_file_output_case().
1113         
1114         * glob.c: (global variable temp_case) Removed.
1115
1116         * inpt-pgm.c: (struct input_program_pgm) Add `case_size' member.
1117         (cmd_input_program) Initialize case_size.  Set
1118         vfm_source->value_cnt.
1119         (init_case) Add struct ccase * parameter, use instead of
1120         temp_case.
1121         (clear_case) Ditto.
1122         (input_program_source_read) Ditto.
1123
1124         * matrix-data.c: (matrix_data_read_without_rowtype) Ditto.
1125         (dump_cell_content) Ditto.
1126         (nr_output_data) Ditto.
1127         (read_matrices_without_rowtype) Ditto.
1128         (matrix_data_read_with_rowtype) Ditto.
1129         (wr_read_splits) Ditto.
1130         (wr_output_data) Ditto.
1131
1132         * sort.h: (struct sort_cases_pgm) New member `case_size'.
1133         
1134         * sort.c: (sort_cases) Initialize scp->case_size.
1135         (struct external_sort) Remove `case_size' member.
1136         (write_initial_runs) Only call vfm_sink->class_destroy if
1137         non-null.
1138         (struct sort_source_aux) New structure.
1139         (sort_source_read_helper) New function.
1140         (sort_source_read) Use sort_source_read_helper().
1141         (read_sort_output) Change interface to be more reasonable.
1142         (read_internal_sort_output) Ditto.
1143         (read_external_sort_output) Ditto.
1144
1145         * vars-prs.c: (dict_class_to_name) Pass return value through
1146         gettext.
1147
1148         * vfm.c: (struct procedure_aux_data) Add `trns_case' member.
1149         (procedure) Initialize trns_case.
1150         (procedure) Pass trns_case to vfm_source->class->read().
1151         Free trns_case.
1152         (process_active_file) Start using struct procedure_aux_data.
1153         (process_active_file_write_case) Pass trns_case to
1154         transformations, lag_case(), clear_case().
1155         (process_active_file_output_case) Add struct ccase * parameter.
1156         (create_trns_case) New function.
1157         (make_temp_case) Removed.
1158         (vector_initialization) Removed.
1159         (close_active_file) Only call make_source if non-null, otherwise
1160         set vfm_source to null pointer.  Don't free temp_case.
1161         (disk_source_read) Add struct ccase * parameter, use instead of
1162         temp_case.
1163         (memory_source_read) Ditto.
1164         (lag_case) Add const struct ccase * member.
1165         (procedure_write_case) Use trns_case instead of temp_case.
1166         (clear_case) Add struct ccase * member, use instead of temp_case.
1167         (exclude_this_case) Ditto.
1168         (create_case_source) Add struct dictionary * parameter, use to
1169         initialize source->value_cnt.
1170
1171         * vfm.h: (struct case_source) Add `value_cnt' member.
1172         (struct case_source_class) Add struct ccase * parameter to `read'
1173         member function pointer.
1174         (struct case_sink_class) Make struct ccase * parameter const in
1175         `write' member function pointer.
1176         
1177 Wed Mar  3 20:44:37 2004  Ben Pfaff  <blp@gnu.org>
1178
1179         Fix a lot of "possibly uninitialized variable" warnings.  Some of
1180         them are even real bugs.  A few of them make me wonder how the
1181         code ever worked.
1182
1183         * aggregate.c: (parse_aggregate_functions) Initialize `function.
1184
1185         * ascii.c: (output_lines) Add default case to switch.
1186
1187         * crosstabs.q: Remove static variable `expected' and all
1188         references to it.
1189         (display_crosstabulation) Always calculate expected value.
1190         (calc_chisq) Ditto.
1191         (output_pivot_table) Initialize `cmp'.
1192         (display_crosstabulation) New variable `last_row', which is
1193         initialized.
1194
1195         * data-in.c: (parse_numeric) Always initialize sign.  How did this
1196         work at all?!
1197
1198         * data-list.c: (repeating_data_trns_proc) Always initialize code.
1199         Always set info.ofs.  (How did this work?!)
1200
1201         * expr-opt.c: (optimize_tree) Always initialize `m'.
1202         (evaluate_tree) Always initialize `c'.  (How did this work?)
1203
1204         * frequencies.q: (frq_custom_variables) Always initialize min,
1205         max.
1206         (frq_custom_grouped) Always initialize `dl'.
1207
1208         * groff-font.c: (groff_read_font) Always initialize char_set.
1209
1210         * matrix-data.c: (nr_output_data) Initialize `split'.
1211         (wr_read_splits) Remove shadowing split_cnt declaration.
1212         (wr_output_data) Initialize `split'.
1213
1214         * output.c: (tokener) Skip add character on syntax error.
1215
1216         * pool.c: (pool_strndup) Always set `copy'.  (How did this work?!)
1217
1218         * postscript.c: (read_ps_encodings) Use line.string instead of
1219         uninitialized `bp'.
1220         (write_text) Add default case to switch.
1221         (text) Always initialize multiple variables.  Fix bug with
1222         ligatures.
1223
1224         * print.c: (fixed_parse_fortran) Initialize head.
1225         (alloc_line) Add default case to switch.
1226
1227         * recode.c: (parse_dest_spec) Handle case where nothing matches.
1228         (recode_trns_proc) Move variable declaration inward.  Add default
1229         case to switch.
1230
1231         * sfm-read.c: (read_header) Initialize skip_amt.
1232
1233         * sysfile-info.c: (display_variables) Always initialize pc.
1234
1235         * vars-prs.c: Initialized `included'.
1236
1237 Wed Mar  3 09:30:09 2004  Ben Pfaff  <blp@gnu.org>
1238
1239         * main.c: (main) sigaction()'s sa_flags member was uninitialized.
1240         Just use signal() instead.
1241
1242 Wed Mar  3 09:26:30 2004  Ben Pfaff  <blp@gnu.org>
1243
1244         Get rid of vfm_sink_info and vfm_source_info.
1245         
1246         * aggregate.c: (agr_00x_end_func) Don't increment
1247         sfm_sink_info.ncases.
1248
1249         * sort.c: (do_internal_sort) Get case count from
1250         vfm_source->class->count().
1251         (struct external_sort) Add `case_size' member.
1252         (do_external_sort) Initialize case_size.
1253         (struct initial_run_state) Add `case_size' member.
1254         (write_initial_runs) Initialize case_size.
1255         (sort_sink_write) Use case_size.
1256         (read_external_sort_output) Use case_size.  Get case_cnt from
1257         initial_runs.
1258
1259         * vfm.c: (struct write_case_data) Add underscores to existing arg
1260         names, all references updated.  Renamed `aux' as `func_aux', all
1261         references updated.  Added new `aux' member.
1262         (global var vfm_source_info) Removed.
1263         (global var vfm_sink_info) Removed.
1264         (struct procedure_aux_data) New.
1265         (struct split_aux_data) New.
1266         (procedure) Use `aux' fields for procedure_aux_data,
1267         split_aux_data.
1268         (process_active_file_write_case) Pass case_count + 1 to
1269         transformation procedures, exclude_this_case().
1270         (process_active_file_output_case) Don't increment
1271         vfm_sink_info.ncases.
1272         (prepare_for_writing) Don't initialize vfm_sink_info.  Don't try
1273         to send data to disk early.
1274         (make_temp_case) Don't use vfm_sink_info.case_size.
1275         (close_active_file) Don't initialize vfm_source_info.
1276         (struct disk_stream_info) New, to allow for case_cnt and case_size fields.
1277         (disk_sink_create) Initialize and/or update disk_stream_info.
1278         (disk_sink_write) Ditto.
1279         (disk_sink_destroy) Ditto.
1280         (disk_sink_make_source) Ditto.
1281         (disk_source_read) Ditto.
1282         (disk_source_destroy) Ditto.
1283         (global var disk_source_class) Add disk_source_count().
1284         (disk_source_count) New function.
1285         (struct memory_sink_info) Add `case_cnt', `case_size' members.
1286         (struct memory_source_info) Ditto.
1287         (memory_sink_create) Deal with case_cnt, case_size.
1288         (memory_sink_write) Ditto.
1289         (memory_sink_make_source) Ditto.
1290         (memory_source_read) Ditto.
1291         (memory_source_count) New function.
1292         (memory_source_class) Add memory_source_count().
1293         (procedure_write_case) Don't use vfm_sink_info.ncases.  Do use
1294         proc_aux->cases_written, and pass it to transformation procedures
1295         and exclude_this_case ().
1296         (exclude_this_case) Add case_num parameter.  Pass it to
1297         expr_evaluate().
1298         (SPLIT_FILE_procfunc) Use split_aux->prev_case instead of static
1299         variable.
1300
1301         * vfm.h: (struct case_source_class) Add `count' member.
1302
1303         * vfmP.h: (struct stream_info) Removed.
1304         (global variable vfm_source_info) Removed.
1305         (global variable vfm_sink_info) Removed.
1306         
1307 Tue Mar  2 23:38:17 2004  Ben Pfaff  <blp@gnu.org>
1308
1309         * var.h: (typedef trns_proc_func) New typedef.
1310         (trns_free_func) New typedef.
1311         (struct trns_header) Change `proc' to type trns_proc_func, `free'
1312         to type trns_free_func.  This only changes the actual type of
1313         trns_proc_func, adding a `case_num' parameter.  Updated all
1314         implementations to use the typedefs instead.
1315
1316         * compute.c: (compute_num) Pass case_num to expr_evaluate().
1317         (compute_num_vec) Ditto.
1318         (compute_str) Ditto.
1319         (compute_str_vec) Ditto.
1320
1321         * do-if.c: (do_if_trns_proc) Ditto.
1322
1323         * expr-evl.c: (expr_evaluate) Add new case_num parameter, use for
1324         OP_CASENUM.
1325
1326         * inpt-pgm.c: (input_program_source_read) Maintain case count,
1327         pass to transformation functions.
1328         (reread_trns_proc) Pass case_num arg to expr_evaluate().
1329
1330         * loop.c: (loop_1_trns_proc) Ditto.
1331         (loop_2_trns_proc) Ditto.
1332         (loop_3_trns_proc) Ditto.
1333
1334         * print.c: (print_space_trns_proc) Ditto.
1335
1336         * sel-if.c: (select_if_proc) Ditto.
1337
1338 Tue Mar  2 11:36:52 2004  Ben Pfaff  <blp@gnu.org>
1339
1340         * frequencies.q: (cleanup_freq_tab) Avoid memory leak by
1341         destroying hash table.
1342
1343         * glob.c: (read_active_file) Variable not referenced, removed.
1344         (cancel_input_pgm) Ditto.
1345
1346         * levene.c: Add #include <stdlib.h> needed to call free().
1347
1348         * aggregate.c: (parse_aggregate_functions) Make `function'
1349         variable const.
1350
1351 Tue Mar  2 11:30:56 2004  Ben Pfaff  <blp@gnu.org>
1352
1353         Start working to eliminate VFM dependence on static variables.
1354
1355         * command.c: (cmd_parse) Use case_source_is_class().
1356
1357         * data-list.c: Rewrite to eliminate use of static variables.
1358
1359         * dfm.c: (cmd_begin_data) Use case_source_is_class().
1360
1361         * file-handle.q: (fh_handle_name) Make parameter const.
1362
1363         * file-type.c: Rewrite to eliminate use of static variables.
1364
1365         * flip.c: Rewrite to eliminate use of static variables.
1366
1367         * format.c: (get_format_var_width) New function.
1368
1369         * get.c: Eliminate use of static variables.
1370
1371         * inpt-pgm.c: Eliminate use of static variables.
1372
1373         * matrix-data.c: Eliminate use of static variables.
1374
1375         * set.q: (set_max_workspace) New variable.
1376         (cmd_set) Use SET WORKSPACE to modify set_max_workspace.
1377
1378         * var.h: (struct case_list) Move here from vfmP.h.
1379
1380         * vars-atr.c: (discard_variables) Handle new vfm_source type.
1381
1382         * vfm.c: (vfm_source) Change type from struct case_stream to
1383         struct case_source.
1384         (vfm_sink) Change type from struct case_stream to struct
1385         case_sink.
1386         (static var paging) Rename workspace_overflow, all references
1387         updated.
1388         (procedure) Use new class structures.
1389         (process_active_file) Ditto.
1390         (process_active_file_write_case) Ditto.
1391         (prepare_for_writing) Use set_max_workspace.  Use new class
1392         structures.
1393         (close_active_file) Use new class structures.  Free old sink.
1394         (global var disk_source_file) Removed.
1395         (global var disk_sink_file) Removed.
1396         (disk_stream_init) Removed.
1397         (disk_stream_read) Removed.
1398         (disk_stream_write) Removed.
1399         (disk_stream_mode) Removed.
1400         (disk_stream_destroy_source) Removed.
1401         (disk_stream_destroy_sink) Removed.
1402         (global var vfm_disk_stream) Removed.
1403         (disk_sink_create) New function.
1404         (disk_sink_write) New function.
1405         (disk_sink_destroy) New function.
1406         (disk_sink_make_source) New function.
1407         (disk_sink_class) New static var.
1408         (disk_source_read) New function.
1409         (disk_source_destroy) New function.
1410         (global var vfm_source_class) New var.
1411         (global var memory_source_cases) Removed.
1412         (global var memory_sink_cases) Removed.
1413         (global var memory_sink_max_cases) Removed.
1414         (struct memory_sink_info) New struct.
1415         (memory_stream_init) Removed.
1416         (memory_stream_read) Removed.
1417         (memory_stream_write) Removed.
1418         (memory_stream_mode) Removed.
1419         (memory_stream_destroy_source) Removed.
1420         (memory_stream_destroy_sink) Removed.
1421         (global var vfm_memory_stream) Removed.
1422         (page_to_disk) Renamed write_active_file_to_disk().
1423         (memory_sink_create) New function.
1424         (memory_sink_write) New function.
1425         (memory_sink_destroy) New function.
1426         (memory_sink_make_source) New function.
1427         (memory_sink_class) New static var.
1428         (memory_source_read) New function.
1429         (memory_source_destroy) New function.
1430         (memory_source_get_cases) New function.
1431         (memory_source_set_cases) New function.
1432         (global var vfm_source_class) New var.
1433         (procedure_write_case) Use new class structures.
1434         (create_case_source) New function.
1435         (case_source_is_complex) New function.
1436         (case_source_is_class) New function.
1437         (create_case_sink) New function.
1438
1439         * vfm.h: (global variable reinit_sysmis) Not used, removed.
1440         (global variable reinit_blanks) Not used, removed.
1441         (global variable init_zero) Not used, removed.
1442         (global variable init_blanks) Not used, removed.
1443         (struct case_source) New struct.
1444         (struct case_source_class) New struct.
1445         (struct case_sink) New struct.
1446         (struct case_sink_class) New struct.
1447         (struct case_stream) Removed.
1448
1449         * vfmP.h: (struct case_list) Moved to var.h.
1450
1451 Tue Mar  2 11:28:30 2004  Ben Pfaff  <blp@gnu.org>
1452
1453         * algorithm.c: (count_equal) New function.
1454         (count_if) New function.
1455         (unique) Add assertions.
1456         (partition) Add assertions.
1457         (is_partitioned) New function.
1458         (copy_if) Add assertions.
1459         (remove_equal) Add assertions.
1460         (lexicographical_compare) Rename lexicographical_compare_3way.
1461         (sort) Add assertions.  Rephrase some code.
1462         (is_sorted) New function.
1463
1464 Sun Feb 29 23:24:57 2004  Ben Pfaff  <blp@gnu.org>
1465
1466         Rewrite SORT CASES.
1467
1468         * sort.c: Completely rewrite.
1469
1470         * sort.h: Expose interface via struct sort_cases_pgm, not via
1471         global variables.
1472
1473         * aggregate.c: (sort) New static var.
1474         (cmd_aggregate) Use sort.
1475         (create_sysfile) Ditto.
1476         (aggregate_single_case) Ditto.
1477         (dump_aggregate_info) Ditto.
1478         (agr_00x_end_func) Ditto.
1479         (debug_print) Ditto.
1480
1481         * var.h: (enum SRT_ASCEND) Removed.
1482         (enum SRT_DESCEND) Removed.
1483         (struct sort_cases_proc) Removed.
1484         (struct variable) Remove p.srt member.
1485
1486 Sun Feb 29 23:22:45 2004  Ben Pfaff  <blp@gnu.org>
1487
1488         Get rid of the old, crappy heap structure and replace it by a new,
1489         shiny, C++ STL-like heap structure.
1490         
1491         * Makefile.am: (pspp_SOURCES) Remove heap.c, heap.h.
1492
1493         * algorithm.c: (push_heap) New function.
1494         (heapify) Ditto.
1495         (pop_heap) Ditto.
1496         (make_heap) Ditto.
1497         (sort_heap) Ditto.
1498         (is_heap) Ditto.
1499         
1500         * heap.c: Removed.
1501
1502         * heap.h: Removed.
1503
1504 Sun Feb 29 23:21:53 2004  Ben Pfaff  <blp@gnu.org>
1505
1506         Increase warning level.
1507         
1508         * Makefile.am: (AM_CFLAGS) Remove -Wnouninitialized.
1509
1510 Sat Feb 21 17:38:58 WST 2004 John Darrington <john@darrington.wattle.id.au>
1511
1512         * main.c: Added a signal handler for SIGSEGV requesting a bug report.
1513          
1514 Fri Feb 20 23:22:14 2004  Ben Pfaff  <blp@gnu.org>
1515
1516         * dictionary.c: (dict_create_var) Fix root cause of bug worked
1517         around by previous change log entry.
1518         
1519         * compute.c: (lvalue_finalize) Remove workaround from previous
1520         change log entry.
1521
1522 Fri Feb 20 14:37:41 WAST 2004 John Darrington <john@darrington.wattle.id.au>
1523
1524         * compute.c: Fixed a bug where the Format was not getting set for 
1525           computed variables (thus causing a crash when SAVEing).
1526
1527         * Added a test to stop this bug ever coming back
1528
1529 Wed Feb 18 22:21:35 2004  Ben Pfaff  <blp@gnu.org>
1530
1531         Got rid of approx.h.  In general, replaced all references to
1532         approx_eq() by ==, approx_lt() by <, etc.  Other types of changes
1533         noted below.
1534
1535         * Makefile.am: (pspp_SOURCES) Removed approx.h.
1536
1537         * data-out.c: (try_F) Replaced test for approx_eq(number, 0.0) by
1538         test for mag < EPSILON.
1539
1540         * misc.h: Add definition of EPSILON.
1541
1542 Wed Feb 18 21:32:44 2004  Ben Pfaff  <blp@gnu.org>
1543
1544         * vfm.c: (procedure) Add check to prevent recursive call.
1545
1546 Wed Feb 18 21:48:54 WST 2004 John Darrington <john@darrington.wattle.id.au>
1547
1548         * Moved the declarations relating to values to their own header file
1549           (val.h)
1550
1551         * Added levene.c and levene.h
1552
1553         * vars-atr.c: Changed the signature of compare_values to 
1554         take const * arguments.
1555                 
1556         * t-test.q: Changed the structure of struct t_test_proc 
1557        variables now contain their own group statistics information.
1558        Eventually, t_test_proc might get renamed, because it'd be 
1559        applicable to other commands too.
1560
1561 Mon Feb 16 23:15:51 2004  Ben Pfaff  <blp@gnu.org>
1562
1563         * data-out.c: Clean up.  Changed interface of convert_*() to take
1564         either a `double' or a `const char *' instead of a `const union
1565         value *'.  Update all implementations of those interfaces.
1566         (data_out) Use switch statements instead of a table.
1567         (convert_AHEX) Rewrite.
1568
1569         * format.h: Update comment.
1570
1571 Mon Feb 16 22:14:36 2004  Ben Pfaff  <blp@gnu.org>
1572
1573         * q2c.c: (dump_header) Add an Emacs header line to output files
1574         that makes generated .c files read-only by default, to make it
1575         difficult to accidentally change generated files.
1576
1577 Mon Feb 16 22:12:07 2004  Ben Pfaff  <blp@gnu.org>
1578
1579         * frequencies.q: (compare_freq_numeric_a) Compare by frequency,
1580         not bogus a->v.c <=> b->v.c pointer compare.
1581         (compare_freq_alpha_a) Ditto.
1582         (compare_freq_numeric_d) Ditto.
1583         (compare_freq_alpha_d) Ditto.
1584         
1585 Mon Feb 16 22:00:53 2004  Ben Pfaff  <blp@gnu.org>
1586
1587         Changed data_out() to store string data directly into a `union
1588         value''s s member, not indirectly into c.
1589
1590         * crosstabs.q: (output_pivot_table) Use format_short() instead of
1591         data_out().
1592         (table_value_missing) Ditto.
1593         (float_M_suffix) Ditto.
1594         (format_short) New function.
1595
1596         * data-in.h: (data_in_finite_line) Remove inline definition.
1597
1598         * data-list.c: (destroy_dls_var_spec) New function.
1599         (destroy_dls) Rewrite in terms of destroy_dls_var_spec().
1600         (data_list_source_destroy_source) Avoid cast.
1601         (struct repeating_data_trns) New field `id_value'.  Update
1602         comments.
1603         (cmd_repeating_data) Initialize id_value.  Use new
1604         repeating_data_trns_free() for freeing REPEATING DATA
1605         transformations.
1606         (rpd_parse_record) Rewrite support for record ID to be less bogus.
1607         (repeating_data_trns_free) New function.
1608
1609         * data-out.c: (data_out) Change return type to `void' by replacing
1610         error returns by writing a message into the output buffer.
1611         (convert_A) Read from v->s instead of v->c.
1612         (convert_AHEX) Ditto.
1613
1614         * expr-evl.c: Update comment.
1615         (expr_evaluate) Add assertion in OP_STRING case.
1616
1617         * format.h: (macro MAX_FORMATTED_LEN) New macro.
1618
1619         * list.q: (list_cases) Update for new data_out() semantics.
1620
1621         * print.c: (print_trns_proc) Ditto.
1622
1623         * tab.c: (tab_value) Ditto.
1624         (tab_float) Avoid stupid cast.
1625
1626         * var.h: Update comments.
1627         (macro MAX_STRING) New macro.
1628         (macro MAX_ELEMS_PER_VALUE) New macro.
1629
1630         * vars-atr.c: (compare_values) New function.
1631
1632         * vfm.c: (dump_splits) Update for new data_out() semantics.
1633
1634 Mon Feb 16 21:45:47 2004  Ben Pfaff  <blp@gnu.org>
1635
1636         * crosstabs.q: (struct table_entry) Rename v[] to values[].  All
1637         references updated.
1638         (struct crosstab) Rename v[] to vars[].  All references updated.
1639         (hash_table_entry) Replace the hash algorithm and fix a bug at the
1640         same time, which caused the hash value to depend only on a single
1641         value, not all of the variables' values.
1642         
1643 Mon Feb 16 12:49:53 2004  Ben Pfaff  <blp@gnu.org>
1644
1645         Clean up struct dictionary's value_cnt usage.
1646
1647         * dictionary.c: Add a function comment to each function.
1648         (struct dictionary) Rename value_cnt to next_value_idx, which more
1649         accurately reflects its meaning.  All references updated.
1650         (dict_rename_vars) Add assertion.
1651         (dict_get_value_cnt) Rename dict_get_next_value_idx().  All
1652         references updated.
1653         (dict_get_case_size) New function.
1654
1655         * aggregate.c: (create_sysfile) Use dict_get_case_size().
1656
1657         * get.c: (mtf_read_nonactive_records) Ditto.
1658
1659         * sort.c: (allocate_cases) Ditto.
1660         (write_initial_runs) Ditto.
1661         (merge) Ditto.
1662         (merge_once) Ditto.
1663
1664         * vfm.c: (prepare_for_writing) Ditto.
1665         (setup_lag) Ditto.
1666         (lag_case) Ditto.
1667
1668 Mon Feb 16 00:17:55 2004  Ben Pfaff  <blp@gnu.org>
1669
1670         Make vfm.c slightly less grotesque.
1671
1672         * vfm.c: (filter_var) Removed.
1673         (filter_index) Removed.
1674         (FILTERED macro) Removed.
1675         (exclude_this_case) New function.
1676         (process_active_file_write_case) Use exclude_this_case() instead
1677         of FILTERED and inline tests.
1678         (procedure_write_case) Ditto.
1679         (setup_filter) Removed.
1680         (open_active_file) Don't call setup_filter().
1681         (close_active_file) Call dict_get_filter() instead of checking
1682         filter_var.
1683
1684 Mon Feb 16 00:01:53 2004  Ben Pfaff  <blp@gnu.org>
1685
1686         * var.h: (struct variable) Update comments.
1687
1688 Sun Feb 15 23:14:59 2004  Ben Pfaff  <blp@gnu.org>
1689
1690         New functions dict_create_var_assert(), dict_lookup_var_assert().
1691         Converted several dict_*_var()/assert pairs into a single
1692         dict_*_var_assert().
1693
1694         * dictionary.c: (dict_create_var_assert) New function.
1695         (dict_lookup_var_assert) New function.
1696
1697 Sun Feb 15 23:06:08 2004  Ben Pfaff  <blp@gnu.org>
1698
1699         Got rid of "struct long_vec", envector(), devector(), etc.  Added
1700         two members `init', `reinit' to struct variable as a substitute.
1701         
1702         * Makefile.am: (pspp_SOURCES) Removed cases.c, cases.h.
1703         
1704         * cases.c: Removed.
1705
1706         * cases.h: Removed.
1707
1708         * aggregate.c: (parse_aggregate_functions) destvar doesn't need
1709         init.
1710
1711         * autorecode.c: (cmd_autorecode) destvars don't need init.
1712
1713         * compute.c: (lvalue_finalize) Set reinit.
1714
1715         * data-list.c: (fixed_parse_compatible) Don't need init usually.
1716         (dump_fmt_list) Ditto.
1717         (parse_free) Ditto.
1718
1719         * descript.q: (run_z_pass) Don't need init for z-scores.
1720
1721         * dictionary.c: (dict_create_var) Initialize `init', `reinit'
1722         members.
1723         (dict_clone_var) Copy `reinit' member, initialize `init' member.
1724
1725         * glob.c: (init_glob) Remove vec_init() calls.
1726
1727         * inpt-pgm.c: (cmd_end_input_program) Use `reinit', not `left'.
1728         
1729         * loop.c: (internal_cmd_loop) Don't need to call envector().
1730
1731         * numeric.c: (cmd_numeric) Ditto.
1732         (cmd_string) Ditto.
1733         (cmd_leave) Ditto.  Set `init', `reinit' members.
1734
1735         * recode.c: (cmd_recode) Don't need to call envector().
1736
1737         * repeat.c: (internal_cmd_do_repeat) Ditto.
1738
1739         * var.h: (struct variable) Remove `left'.  Add `init', `reinit'.
1740         (force_create_variable) Removed prototype.
1741         (force_dup_variable) Ditto.
1742
1743         * vector.c: (cmd_vector) Don't need to call envector().
1744
1745         * vfm.c: (reinit_sysmis) Removed.
1746         (reinit_blanks) Removed.
1747         (init_zero) Removed.
1748         (init_blanks) Removed.
1749         (process_active_file_write_case) No need to deal with vectors.
1750         Call clear_temp_case().
1751         (vector_initialization) Rewrite to use `init', `reinit'.
1752         (close_active_file) No need to call vec_clear().
1753         (procedure_write_case) Call clear_temp_case().
1754         (clear_temp_case) New function.
1755
1756 Sun Feb 15 20:50:36 2004  Ben Pfaff  <blp@gnu.org>
1757
1758         * pfm-write.c: (bufwrite) Get rid of nasty cast that also invoked
1759         undefined behavior.
1760
1761 Thu Feb 12 23:35:15 2004  Ben Pfaff  <blp@gnu.org>
1762
1763         Add auxiliary argument to procedure() interface.  Associated small
1764         clean-ups of vfm interface.
1765         
1766         * Updated every caller of procedure() and process_active_file() to
1767         reflect modified interface.  Simple, ordinary changes not listed
1768         otherwise below.
1769
1770         * Updated every function that implements struct case_stream's
1771         `read' function to take a write_case_func and a write_case_data.
1772         Also updated every caller of write_case() to instead call them
1773         through these arguments.  In some cases this meant that the extra
1774         args had to be threaded through a couple of extra levels.  This
1775         wasn't difficult or interesting so the details won't be given.
1776
1777         * data-list.c: (struct repeating_data_trns) Add members
1778         `write_case', `wc_data' as kluge.
1779         (read_one_set_of_repetitions) Rename repeating_data_trns_proc and
1780         make non-static.
1781         (repeating_data_set_write_case) New function.
1782
1783         * data-list.h: New file to declare repeating_data_trns_proc() and
1784         repeating_data_set_write_case().
1785
1786         * inpt-pgm.c: (input_program_source_read) Call
1787         repeating_data_set_write_case() for all the REPEATING DATA
1788         transformations, so that they know where to send their cases.
1789         It's a big kluge.  Also kluge in END CASE.
1790         (end_case_trns_proc) Never called anymore, but we still need it,
1791         so just assert(0).
1792
1793         * sort.c: (read_sort_output) Update to match struct case_stream
1794         `read' member.
1795
1796         * vfm.c: (struct write_case_data) New structure.
1797         (proc_func) Removed.
1798         (virt_proc_func) Removed.
1799         (begin_func) Removed.
1800         (virt_begin_func) Removed.
1801         (end_func) Removed.
1802         (write_case) Removed.
1803         (procedure) Added an auxiliary parameter to each function pointer
1804         argument's prototype.  Added an auxiliary data parameter.
1805         Rewrote.
1806         (process_active_file) Ditto.
1807         (process_active_file_write_case) Pass aux data along.
1808         (close_active_file) Ditto.
1809         (procedure_write_case) Ditto.
1810         (SPLIT_FILE_procfunc) Ditto.
1811
1812         * vfm.h: (typedef write_case_data) New.
1813         (typedef write_case_func) New.
1814         (struct case_stream) Add parameters to `read' member prototype.
1815         
1816 Thu Feb 12 19:24:53 WST 2004 John Darrington <john@darrington.wattle.id.au>
1817
1818         * t-test.q:  Added calculations for independent samples. (But no Levene
1819         test yet!)
1820
1821         * Makefile.am: Moved q_sources_c into own variable 
1822
1823 Wed Feb 11 23:56:51 2004  Ben Pfaff  <blp@gnu.org>
1824
1825         Miscellaneous cleanups.
1826         
1827         * Change unused to UNUSED in many source files to reflect modified
1828         pref.h.  Change use of __WIN32__, __MSDOS, __DJGPP__,
1829         __CYGWIN32__, __unix__, and unix not to assume that they're
1830         defined to a nonzero value.  Change use of __attribute__ to use
1831         NO_RETURN or PRINTF_FORMAT instead.
1832         
1833         * alloc.h: Move definitions for local_alloc(), local_free() here
1834         from ../pref.h.orig and simplify.
1835
1836         * expr-evl.c: Instead of working differently based on PAGED_STACK,
1837         use a pool allocator unconditionally.
1838         (CHECK_STRING_SPACE) Removed.
1839         (ALLOC_STRING_SPACE) Removed.
1840         (expr_evaluate) Use e->pool instead of CHECK_STRING_SPACE and
1841         ALLOC_STRING_SPACE.
1842
1843         * expr-opt.c: (dump_expression) Allocate string pool.
1844
1845         * expr-prs.c: (expr_free) Free string pool.
1846
1847         * pool.c: (pool_destroy) This pool must be removed from its
1848         parent's list of gizmos, not from its own.  Use free_all_gizmos().
1849         (pool_clear) New function.
1850         (free_all_gizmos) New function.
1851         (pool_alloc) Use space in empty block after this one if any.
1852         (pool_release) Only empty out blocks, don't actually free() them.
1853
1854         * print.c: Get rid of PAGED_STACK special case by always
1855         dynamically allocating line buffers.
1856         (struct print_trns) Always include the `line' member.
1857         (internal_cmd_print) Always initialize the `line' member.
1858         (alloc_line) Always allocate memory for `line'.
1859         (print_trns_proc) Always initialize buf from `line' member.
1860         (print_trns_free) Always free `line' memory.
1861
1862         * sort.c: (allocate_file_handles) Special-case MS-DOS for mkdir()
1863         call.
1864         
1865 Wed Feb 11 20:33:18 2004  Ben Pfaff  <blp@gnu.org>
1866
1867         * flip.c: Fixed crash from FLIP when a numeric variable is
1868           specified on NEWNAMES and a large value is used, and a couple of
1869           other minor bugs besides.
1870           (struct varname) Make name a 9-character fixed-size array
1871           instead of a 1-character variable size array.
1872           (make_new_var) Allow digits in variable names.
1873           (flip_stream_write) Limit numeric values to 8 characters and
1874           format system missing and very large and small values more
1875           appropriately.
1876
1877 Thu Feb  5 13:19:06 WAST 2004 John Darrington <john@darrington.wattle.id.au>
1878
1879         * command.c: Fixed test on command return status for the correct 
1880           value,  which had been causing a crash under certain invalid input.
1881
1882 Wed Feb  4 15:34:11 WST 2004 John Darrington <john@darrington.wattle.id.au>
1883
1884         * t-test.q: Added calculations for the one sample variant of the T-TEST
1885
1886 Tue Feb  3 20:09:54 2004  Ben Pfaff  <blp@gnu.org>
1887
1888         * tab.c: (render_strip) Fix bug that sometimes caused joined text
1889           in joined cells to be rendered outside box boundaries.
1890
1891 Tue Feb  3 18:56:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
1892
1893         * random.c (rng_create): Fixed seeding so that it gets reseeded after
1894         SET seed=xx has been called.
1895
1896 Mon Jan 19 14:08:09 2004  Ben Pfaff  <blp@gnu.org> 
1897
1898         * random.c (rng_get_double): Fix always-returning-zero bug in my
1899         preferred way, and at the same time make sure rounding doesn't
1900         bite us.
1901
1902 Thu Jan  1 23:16:41 2004  Ben Pfaff  <blp@gnu.org>
1903
1904         * html.c: (change_attributes) Dead code, removed.
1905         (escape_string) Eliminate code to call change_attributes() that
1906         never actually called it.
1907         (output_tab_table) Get rid of dependence on tab_hit
1908         and struct tab_joined_cell's hit member, which are abominations.
1909
1910         * tab.c: (tab_output_text) Don't call
1911         d->class->text_set_font_by_name if it's a null pointer.
1912         (macro UNROLL_LOOP) Eliminate.
1913         (macro UNROLL_3_LOOPS) Eliminate.
1914         (tabi_render) Rewrite not to use the above macros.
1915
1916 Thu Jan  1 23:09:07 2004  Ben Pfaff  <blp@gnu.org>
1917
1918         Start working on a new output driver system, one that doesn't suck
1919         so much, by adding a "device-independent" output driver.  The idea
1920         is to write out only a single output stream, then use separate
1921         processes to translate them into whatever formats we want.  This
1922         is similar to how "groff" works with its various output drivers
1923         (grops, grotty, grodvi, ...).
1924         
1925         * Makefile.am: (pspp_SOURCES) Add devind.c, devind.h.
1926
1927         * list.q: (write_all_headers) Stub out devind class.
1928         (clean_up) Ditto.
1929         (determine_layout) Ditto.
1930         (list_cases) Ditto.
1931
1932         * output.c: (outp_init) Add devind class.
1933
1934         * devind.c: New file.
1935
1936         * devind.h: New file.
1937
1938 Thu Jan  1 23:08:14 2004  Ben Pfaff  <blp@gnu.org>
1939
1940         * frequencies.q: (hash_value_alpha) Fixed up the previous change
1941         to use the proper string length.
1942
1943 Wed Dec 31 16:27:33 WAST 2003 John Darrington <john@darrington.wattle.id.au>
1944
1945         * Fixed bug where FREQ would crash on alpha values
1946
1947 Tue Dec 30 22:42:57 2003  Ben Pfaff  <blp@gnu.org>
1948
1949         * Removed bletcherous alloca() workarounds for AIX from top of
1950         many files.  AIX can use the alternative alloca() implementation
1951         instead.
1952
1953 Tue Dec 30 22:35:16 2003  Ben Pfaff  <blp@gnu.org>
1954
1955         * ascii.c: (ascii_option) Fix implementation of headers option.
1956
1957 Tue Dec 30 22:32:53 2003  Ben Pfaff  <blp@gnu.org>
1958
1959         * ascii.c: Add a "squeeze" option to the ASCII driver to squeeze
1960         multiple blank lines into one.
1961         (struct ascii_driver_ext) Add squeeze_blank_lines option.
1962         (ascii_preopen_driver) Initialize squeeze_blank_lines.
1963         (static var option_tab) Add squeeze entry.
1964         (ascii_option) Set squeeze_blank_lines.
1965         (output_lines) Implement squeezing blank lines.
1966
1967 Wed Dec 31 07:19:46 WST 2003 John Darrington <john@darrington.wattle.id.au>
1968
1969         * Removed redundant code from output.h
1970
1971 Sat Dec 27 22:17:52 2003  Ben Pfaff  <blp@gnu.org>
1972
1973         Dictionary classes: each variable is "ordinary", "system", or
1974         "scratch".
1975
1976         * var.h: (enum dict_class) New enum.
1977
1978         * vars-prs.c: (dict_class_from_id) New function.
1979         (dict_class_to_name) New function.
1980
1981 Sat Dec 27 22:16:06 2003  Ben Pfaff  <blp@gnu.org>
1982
1983         * var.h: (struct freq_tab_set) Removed (not used).
1984
1985 Sat Dec 27 22:15:21 2003  Ben Pfaff  <blp@gnu.org>
1986
1987         * value-labels.c: (val_labs_destroy) vls needs to be freed too.
1988
1989 Sat Dec 27 22:10:49 2003  Ben Pfaff  <blp@gnu.org>
1990
1991         * stats.c: (hypercube) Rename pow4().  All references updated.
1992
1993 Sat Dec 27 22:05:49 2003  Ben Pfaff  <blp@gnu.org>
1994
1995         * rename-vars.c: (cmd_rename_variables) Rewritten.
1996         (compare_name) Removed.
1997
1998 Sat Dec 27 22:03:51 2003  Ben Pfaff  <blp@gnu.org>
1999
2000         var_set feature, and code taking advantage of it.
2001         
2002         * crosstabs.q: (static var var_dict) Removed.
2003         (static var variables) New variable.
2004         (static var variables_cnt) New variable.
2005         (cmd_crosstabs) Free variables instead of var_dict.
2006         (internal_cmd_crosstabs) Initialize and use variables,
2007         variables_cnt instead of var_dict.
2008         (free_var_dict) Removed.
2009         (crs_custom_tables) Use var_set instead of a copied dictionary.
2010         (crs_custom_variables) Set up variables, variables_cnt instead of
2011         var_dict.
2012         [DEBUGGING] (debug_print) Ditto.
2013
2014         * means.q: (mns_custom_tables) Use var_set instead of a copied
2015         dictionary.
2016
2017         * vars-prs.c: (parse_vs_variable) New function.
2018         (parse_dict_variable) Rewritten.
2019         (parse_variable) Rewritten.
2020         (parse_variables) Renamed parse_var_set_vars(), rewritten.
2021         (parse_variables) New function in terms of parse_var_set_vars().
2022         Now requires its first argument to be non-null.  All references
2023         that passed a null pointer updated to pass default_dict instead.
2024         (macro id_dict) Removed.
2025         (parse_DATA_LIST_vars) Add assertions.
2026         (parse_mixed_vars) Ditto.
2027         (struct var_set) New structure.
2028         (var_set_get_cnt) New function.
2029         (var_set_get_var) New function.
2030         (var_set_lookup_var) New function.
2031         (var_set_destroy) New function.
2032         (dict_var_set_get_cnt) New function.
2033         (dict_var_set_get_var) New function.
2034         (dict_var_set_lookup_var) New function.
2035         (dict_var_set_destroy) New function.
2036         (var_set_create_from_dict) New function.
2037         (struct array_var_set) New structure.
2038         (array_var_set_get_cnt) New function.
2039         (array_var_set_get_var) New function.
2040         (array_var_set_lookup_var) New function.
2041         (array_var_set_destroy) New function.
2042         (var_set_create_from_array) New function.
2043
2044         * q2c.c: (dump_parser) Use parse_variables(default_dict, ...)
2045         instead of parse_variables(NULL, ...) in output code.
2046
2047 Sat Dec 27 21:38:53 2003  Ben Pfaff  <blp@gnu.org>
2048
2049         Change inp_init from a 2-bit vector to an ordinary array.
2050         Initialize it all in cmd_end_input_program() instead of in
2051         create_variable().
2052
2053         * inpt-pgm.c: (enum value_init_type) New enum.
2054         (global var inp_init) Change to `enum value_init_type *', make
2055         static.
2056         (inp_init_size) Removed.
2057         (inp_nval) Change to `size_t', make static.
2058         (cmd_input_program) Don't initialize inp_init or inp_init_size.
2059         (cmd_end_input_program) Initialize inp_init, inp_nval.
2060         (init_case) Rewrite.
2061         (clear_case) Rewrite.
2062
2063         * inpt-pgm.h: Removed.
2064
2065 Sat Dec 27 21:36:38 2003  Ben Pfaff  <blp@gnu.org>
2066
2067         * hash.c: (hsh_hash_bytes) Use Fowler-Noll-Vo hash instead of
2068         Colin Plumb hash.  It is simpler and should better resist
2069         collisions.
2070         (hsh_hash_string) Ditto.
2071
2072 Sat Dec 27 21:34:57 2003  Ben Pfaff  <blp@gnu.org>
2073
2074         * get.c: (export_write_case_func) Remove debug printing code.
2075
2076 Sat Dec 27 21:11:09 2003  Ben Pfaff  <blp@gnu.org>
2077
2078         * get.c: (cmd_save_internal) Rename parameter.  Use &t->h instead
2079         of cast.
2080         (save_write_case_func) Use &trns->h instead of cast.
2081         (cmd_export) Use &t->h instead of cast.
2082
2083 Sat Dec 27 20:57:42 2003  Ben Pfaff  <blp@gnu.org>
2084
2085         Moved vectors into the dictionary.
2086
2087         * var.h: (struct vector) Moved here from vector.h.  `index' member
2088         renamed `idx', `v' renamed `var', `nv' renamed `cnt'.  All
2089         references updated.
2090         
2091         * vector.h: Removed.
2092
2093         * vector.c: (global var vec) Removed.
2094         (global var nvec) Removed.
2095         (cmd_vector) Rewritten.
2096         (find_vector) Removed.
2097
2098         * dictionary.c: (dict_create_vector) New function.
2099         (dict_get_vector) New function, replaces reading global vec[]
2100         array.
2101         (dict_get_vector_cnt) New function, replaces reading global nvec
2102         variable.
2103         (dict_lookup_vector) New function, replaces find_vector().
2104         (dict_clear_vectors) New function.
2105
2106 Sat Dec 27 20:54:01 2003  Ben Pfaff  <blp@gnu.org>
2107
2108         Start to move away from `struct variable' p `union' member to void
2109         * aux member.
2110
2111         * var.h: (struct variable) Add `aux' member.
2112
2113 Sat Dec 27 20:36:25 2003  Ben Pfaff  <blp@gnu.org>
2114
2115         Get rid of struct variable `foo' member.
2116
2117         * frequencies.q: (internal_cmd_frequencies) Use p.frq.used instead
2118         of foo.
2119         (frq_custom_variables) Ditto.
2120         (frq_custom_grouped) Ditto.
2121
2122         * get.c: (struct save_trns) Change `var' member from `int *' to
2123         `struct variable **'.
2124         (cmd_save_internal) Use aux instead of foo.
2125         (save_trns_proc) Use revised `var' member.
2126         (static var mtf_seq_no) Renamed mtf_seq_num.
2127         (static var mtf_seq_nums) New static var.
2128         (cmd_match_files) Initialize mtf_seq_nums.
2129         (mtf_free) Free mtf_seq_nums.
2130         (mtf_processing) Use mtf_seq_nums instead of foo.
2131         (mtf_merge_dictionary) No need to initialize mv->foo.
2132         (cmd_export) Use aux instead of foo.  Use revised `var' member.
2133         (mns_custom_tables) Don't use foo to check for duplicates, that's
2134         what PV_NO_DUPLICATE is for.
2135
2136         * var.h: (struct variable) Remove `foo' member.
2137         (struct frequencies_proc) New member.
2138         
2139 Sat Dec 27 19:46:13 2003  Ben Pfaff  <blp@gnu.org>
2140
2141         Clean up COMPUTE and IF.
2142
2143         * compute.c: More or less rewrite the darn thing.
2144         (struct compute_trns) Rename and reorder and add and delete
2145         members.
2146         (cmd_compute) Rewrite.
2147         (compute_num) Make conditional on test expression.  Now used for
2148         both COMPUTE and IF.
2149         (compute_num_vec) Ditto.
2150         (compute_str) Ditto.
2151         (compute_str_vec) Ditto.
2152         (cmd_if) Rewrite.
2153         (if_num) Removed.
2154         (if_num_vec) Removed.
2155         (if_str) Removed.
2156         (if_str_vec) Removed.
2157         (parse_target_expression) Renamed parse_rvalue_expression(),
2158         rewritten.
2159         (new_trns) Renamed compute_trns_create(), rewritten.
2160         (delete_trns) Removed.
2161         (free_trns) Renamed compute_trns_free(), rewritten.
2162         (struct lvalue) New structure.
2163         (parse_var_or_vec) Renamed lvalue_parse(), rewritten.
2164         (lvalue_get_type) New function.
2165         (lvalue_is_vector) New function.
2166         (lvalue_finalize) New function.
2167         (lvalue_destroy) New function.
2168         
2169 Sat Dec 27 19:44:14 2003  Ben Pfaff  <blp@gnu.org>
2170
2171         * command.def: Disallow MODIFY VARS in input mode, so that
2172         variables can't get dropped and confuse cmd_end_input_program()'s
2173         attempt to fill inp_init[].
2174         
2175         * modify-vars.c: (static var forward_positional_ordering) New
2176         variable.
2177         (struct var_modification) Entirely changed.
2178         (rearrange_dict) Interface changed, rewritten.
2179         (cmd_modify_vars) Deal with modified struct var_modification, much
2180         rewritten.
2181         (struct var_renaming) New structure.
2182         (compare_var_renaming_by_new_name) New function.
2183         (validate_var_modification) New function.
2184
2185         * var.h: (struct modify_vars_proc) Removed.
2186         (struct variable) Removed member p.mfv.
2187
2188 Sat Dec 27 19:40:26 2003  Ben Pfaff  <blp@gnu.org>
2189
2190         Make EVALUATE a valid command whether we're debugging or not, so
2191         that `make check' can succeed regardless of whether debugging is
2192         turned on.
2193         
2194         * command.def: [GLOBAL_DEBUGGING] Drop the #if.
2195
2196         * compute.c: [GLOBAL_DEBUGGING] (cmd_evaluate) Drop the #if.
2197
2198 Sat Dec 27 19:34:40 2003  Ben Pfaff  <blp@gnu.org>
2199
2200         * apply-dict.c: (cmd_apply_dictionary) Replace a ghastly switch
2201         statement by a simple if test.
2202
2203         * dfm.c: (dfm_get_record) Add assertion.
2204
2205 Sat Dec 27 17:51:26 2003  Ben Pfaff  <blp@gnu.org>
2206
2207         For each file x.c, move #include "x.h" to the very top of the
2208         include list, to catch x.h failing to include the proper headers.
2209
2210 Sat Dec 27 17:50:19 2003  Ben Pfaff  <blp@gnu.org>
2211
2212         * algorithm.c: (find) New function.
2213         (remove_equal) New function.
2214         (set_difference) New function.
2215         (adjacent_find_equal) New function.
2216         [TEST_UNIQUE] Removed test case.
2217         (copy_if) Find end test.
2218
2219 Sat Dec 27 17:42:45 2003  Ben Pfaff  <blp@gnu.org>
2220
2221         * dictionary.c: (dict_get_case_weight) New convenience function.
2222
2223         * aggregate.c: (accumulate_aggregate_info) Use
2224         dict_get_case_weight().
2225
2226         * frequencies.q: (calc_general) Ditto.
2227         (calc_integer) Ditto.
2228         (calc) Ditto.
2229
2230         * t-test.q: (groups_calc) Ditto.
2231         (z_calc) Ditto.
2232
2233 Sat Dec 27 17:29:45 2003  Ben Pfaff  <blp@gnu.org>
2234
2235         * glob.c: (global var default_dict) Change from `struct
2236         dictionary' to `struct dictionary *'.  All references changed.
2237         (init_glob) Initialize default_dict with dict_create().
2238
2239 Sat Dec 27 17:06:06 2003  Ben Pfaff  <blp@gnu.org>
2240
2241         struct dictionary now made opaque.  All related functions:
2242
2243         * get.c: (rename_variables) Removed.
2244         (dict_delete_run) Removed.
2245         
2246         * temporary.c: (copy_variable) Removed.
2247         (new_dictionary) Removed.
2248         (save_dictionary) Removed.
2249         (restore_dictionary) Removed.
2250         (free_dictionary) Removed.
2251
2252         * vars-atr.c: (clear_default_dict) Removed.
2253         (find_variable) Removed.
2254         (find_dict_variable) Removed.
2255         (create_variable) Removed.
2256         (delete_variable) Removed.
2257         (common_init_stuff) Removed.
2258         (init_variable) Removed.  Updating of inp_init moved into
2259         cmd_end_input_program().
2260         (replace_variable) Removed.
2261         (rename_variable) Removed.
2262         (clear_variable) Removed.
2263         (dup_variable) Removed.
2264
2265         * vars-prs.c: (is_varname) Removed.
2266         (is_dict_varname) Removed.
2267         (fill_all_vars) Removed.
2268
2269         * vector.c: (find_vector) Removed.
2270
2271         * weight.c: (stop_weighting) Removed.
2272
2273         * dictionary.c: New file.
2274         (dict_create) New, replaces new_dictionary().
2275         (dict_clone) New, replaces save_dictionary() and
2276         restore_dictionary().
2277         (dict_clear) New, replaces clear_default_dict().
2278         (dict_destroy) New, replaces free_dictionary().
2279         (dict_get_var_cnt) New function, replaces references to
2280         dict->nvar.
2281         (dict_get_var) New function, replaces references to dict->var[i].
2282         (dict_get_vars) New function, replaces fill_all_vars().
2283         (dict_create_var) New, replaces create_variable().  Interface
2284         drops `type' parameter, using a zero `width' to designate numeric.
2285         (dict_clone_var) New, replaces dup_variable().
2286         (dict_rename_var) New, replaces rename_variable().
2287         (dict_lookup_var) New, replaces find_variable(),
2288         find_dict_variable(), is_varname().
2289         (dict_contains_var) New function.
2290         (compare_variable_dblptrs) New function.
2291         (dict_delete_var) New function, replaces clear_variable().
2292         (dict_delete_vars) New function, replaces dict_delete_run().
2293         (dict_reorder_vars) New function.
2294         (dict_rename_vars) New function, replaces rename_variables().
2295         (dict_get_weight) New function, replaces reading dict->weight_var.
2296         (dict_set_weight) New function, replaces writing dict->weight_var
2297         or calling stop_weight(dict).
2298         (dict_get_filter) New function, replaces reading dict->filter_var.
2299         (dict_set_filter) New function, replaces writing dict->filter_var.
2300         (dict_get_case_limit) New function, replaces reading dict->N.
2301         (dict_set_case_limit) New function, replaces writing dict->N.
2302         (dict_get_value_cnt) New function, replaces reading dict->nval.
2303         (dict_compact_values) New function, replaces a loop that was
2304         replicated in several places.
2305         (dict_get_split_vars) New function, replaces reading dict->splits.
2306         (dict_get_split_cnt) New function, replaces reading
2307         dict->n_splits.
2308         (dict_set_split_vars) New function, replaces writing dict->splits.
2309         (dict_get_label) New function, replaces reading dict->label.
2310         (dict_set_label) New function, replaces writing dict->label.
2311         (dict_get_documents) New function, replaces reading
2312         dict->documents.
2313         (dict_set_documents) New function, replaces writing
2314         dict->documents.
2315         
2316         All references to above functions updated.
2317         
2318         * aggregate.c: (cmd_aggregate) Copy file label and documents from
2319         old dictionary to new by hand, because dict_create() can't do it
2320         itself.  Use dict_set_documents(), dict_set_split_vars().
2321
2322         * temporary.c: (cancel_temporary) Also set temp_dict to NULL after
2323         calling dict_destroy().
2324
2325         * data-list.c: (dls_var_spec) Remove `type' member, replace by
2326         `width'.
2327         (fixed_parse_compatible) Some slightly nontrivial changes for
2328         dict_create_var().
2329         (dump_fmt_list) Ditto.
2330         (parse_free) Ditto.
2331
2332         * file-type.c: (create_col_var) Ditto.
2333
2334         * get.c: (cmd_get) Use dict_compact_values() instead of a loop.
2335         (trim_dictionary) Use dict_delete_vars(), dict_reorder_vars().
2336         (rename_variables) Use dict_rename_vars().
2337         (mtf_merge_dictionary) Use dict_get_documents(),
2338         dict_set_documents(), dict_compact_values().
2339
2340         * pfm-read.c: (read_variables) Deal with changes to weighting.
2341
2342         * q2c.c: (dump_parser) Use dict_lookup_var() instead of
2343         is_varname() in output code.
2344
2345         * sfm-read.c: (read_header) Use dict_create(), dict_set_label(),
2346         other dictionary functions.
2347
2348         * title.c: (add_document_line) Use dict_get_documents(),
2349         dict_set_documents().
2350
2351         * vars-atr.c: (discard_variables) Use dict_clear(default_dict),
2352         reset default_handle by hand.  dict_clear() will clear vectors so
2353         there's no need for that by hand.
2354
2355         * vfm.c: (close_active_file) Move call to finish_compaction()
2356         earlier, so that we can do the compaction as a single step using
2357         dict_compact_values().  Use dict_clear_vectors().
2358         (finish_compaction) Use dict_delete_var(), dict_compact_values().
2359                 
2360         Some functions don't have replacements:
2361
2362         * vars-atr.c: (force_create_variable) Removed.  All references
2363         updated to dict_create_var() followed by an assertion.
2364         (force_dup_variable) Removed.  All references updated to
2365         dict_clone_var() followed by an assertion.
2366         
2367         * weight.c: (update_weighting) Removed.  No longer necessary, so
2368         all references removed.
2369
2370 Sat Dec 27 16:43:01 2003  Ben Pfaff  <blp@gnu.org>
2371
2372         Clean up AGGREGATE.
2373         
2374         * aggregate.c: Eliminate separation of weighted and unweighted
2375         case.  It made the code too obscure and I doubt it was actually
2376         faster.  Instead, all code uses the "weighted" code, because
2377         that's a generalization of the "unweighted" code.
2378         (FWEIGHT) Removed.
2379         (FOPTIONS) Ditto.
2380         (parse_aggregate_functions) No need to set FWEIGHT.
2381         (accumulate_aggregate_info) Get rid of FWEIGHT cases.
2382         (dump_aggregate_info) Ditto.
2383         (initialize_aggregate_info) No need for special plain_function
2384         that gets rid of FWEIGHT option.
2385
2386         * aggregate.c: Get rid of approximations.
2387         (accumulate_aggregate_info) Don't use approx_gt(), approx_lt(),
2388         approx_in_range().
2389         (aggregate_single_case) Don't use approx_ne().
2390
2391 Sat Dec 27 16:19:36 2003  Ben Pfaff  <blp@gnu.org>
2392
2393         * ascii.c (ascii_line_width): Dead code, removed.
2394
2395         * postscript.c (ps_line_width): Ditto.
2396
2397         * q2c.c (xrealloc): Ditto.
2398
2399         * count.c (internal_cmd_count): Ditto.
2400
2401         * means.q (validate_dependent_endpoint): Ditto.
2402
2403         * set.q: (cmd_gset) Ditto.
2404
2405         * weight.c: [0] (weight_trns_proc) Ditto.
2406
2407 Sat Dec 27 16:18:16 2003  Ben Pfaff  <blp@gnu.org>
2408
2409         Make the code -Wmissing-prototypes clean.
2410
2411         * Makefile.am (version.c): Add #include "version.h".
2412         
2413         * ascii.c: (ascii_open_global) Make static.
2414         (ascii_close_page) Ditto.
2415         (ascii_font_sizes) Ditto.
2416         (ascii_postopen_driver) Ditto.
2417         (ascii_close_driver) Ditto.
2418         (ascii_option) Ditto.
2419         (ascii_open_page) Ditto.
2420         (ascii_line_horz) Ditto.
2421         (ascii_line_vert) Ditto.
2422         (ascii_line_intersection) Ditto.
2423         (ascii_box) Ditto.
2424         (ascii_polyline_begin) Ditto.
2425         (ascii_polyline_point) Ditto.
2426         (ascii_polyline_end) Ditto.
2427         (ascii_text_set_font_by_name) Ditto.
2428         (ascii_text_set_font_by_position) Ditto.
2429         (ascii_text_set_font_by_family) Ditto.
2430         (ascii_text_get_font_name) Ditto.
2431         (ascii_text_get_font_family) Ditto.
2432         (ascii_text_set_size) Ditto.
2433         (ascii_text_get_size) Ditto.
2434         (ascii_text_metrics) Ditto.
2435         (ascii_text_draw) Ditto.
2436         (ascii_close_page) Ditto.
2437
2438         * cmdline.h: New header for parse_command_line().  Used where
2439         needed.
2440
2441         * command.c: Move prototypes for cmd_*() functions to command.h.
2442
2443         * command.h: Prototypes for cmd_*() functions moved here from
2444         command.c.
2445
2446         * crosstabs.q: (gamma_int) Ditto.
2447
2448         * file-handle.h: Add fh_init_files() prototype.
2449         
2450         * getline.c: (welcome) Ditto.
2451
2452         * glob.h: New header for init_glob().  Used where appropriate.
2453
2454         * hash.c: (comparison_helper) Ditto.
2455
2456         * html.c: (html_open_global) Ditto.
2457         (html_close_global) Ditto.
2458         (html_preopen_driver) Ditto.
2459         (html_postopen_driver) Ditto.
2460         (html_close_driver) Ditto.
2461         (html_option) Ditto.
2462         (html_open_page) Ditto.
2463         (html_close_page) Ditto.
2464         (html_submit) Ditto.
2465
2466         * inpt-pgm.c: (input_program_source_read) Ditto.
2467
2468         * output.c: (find_defn_value) Ditto.
2469         (destroy_list) Ditto.
2470
2471         * pfm-read.c: (read_int) Ditto.
2472
2473         * postscript.c: (ps_open_global) Ditto.
2474         (ps_close_global) Ditto.
2475         (ps_font_sizes) Ditto.
2476         (ps_preopen_driver) Ditto.
2477         (ps_postopen_driver) Ditto.
2478         (ps_close_driver) Ditto.
2479         (ps_option) Ditto.
2480         (ps_open_page) Ditto.
2481         (ps_close_page) Ditto.
2482         (ps_line_horz) Ditto.
2483         (ps_line_vert) Ditto.
2484         (ps_line_intersection) Ditto.
2485         (ps_box) Ditto.
2486         (ps_polyline_begin) Ditto.
2487         (ps_polyline_point) Ditto.
2488         (ps_polyline_end) Ditto.
2489         (ps_text_set_font_by_name) Ditto.
2490         (ps_text_set_font_by_position) Ditto.
2491         (ps_text_set_font_family) Ditto.
2492         (ps_text_get_font_name) Ditto.
2493         (ps_text_get_font_family) Ditto.
2494         (ps_text_set_size) Ditto.
2495         (ps_text_get_size) Ditto.
2496         (ps_text_metrics) Ditto.
2497         (ps_text_draw) Ditto.
2498
2499         * q2c.c: (finish_up) Ditto.
2500         (xmalloc) Ditto.
2501         (xstrdup) Ditto.
2502         (get_buffer) Ditto.
2503         (st_lower) Ditto.
2504         (st_upper) Ditto.
2505         (skip_ws) Ditto.
2506         (get_line) Ditto.
2507         (add_symbol) Ditto.
2508         (find_symbol) Ditto.
2509         (lex_get) Ditto.
2510         (force_id) Ditto.
2511         (force_string) Ditto.
2512         (match_id) Ditto.
2513         (match_token) Ditto.
2514         (skip_token) Ditto.
2515         (parse) Ditto.
2516         (parse_setting) Ditto.
2517         (parse_specifier) Ditto.
2518         (parse_specifiers) Ditto.
2519         (parse_subcommand) Ditto.
2520         (dump_specifier_vars) Ditto.
2521         (is_keyword) Ditto.
2522         (make_identifier) Ditto.
2523         (dump_declarations) Ditto.
2524         (dump_specifier_init) Ditto.
2525         (dump_vars_init) Ditto.
2526         (make_match) Ditto.
2527         (dump_specifier_parse) Ditto.
2528         (dump_subcommand) Ditto.
2529         (dump_parser) Ditto.
2530         (dump_header) Ditto.
2531         (dump_free) Ditto.
2532         (recognize_directive) Ditto.
2533
2534         * recode.c: (string_to_long) Ditto.
2535
2536         * repeat.c: (find_DO_REPEAT_substitution) Ditto.
2537
2538         * repeat.h: New header for perform_DO_REPEAT_substitutions, used
2539         where appropriate.
2540
2541         * sort.c: (sort_stream_read) Ditto.
2542         (sort_stream_mode) Ditto.
2543         
2544 Fri Dec 19 23:35:04 2003  Ben Pfaff  <blp@gnu.org>
2545
2546         * algorithm.c (binary_search): Fix comparison.
2547
2548 Fri Dec 19 23:27:45 2003  Ben Pfaff  <blp@gnu.org>
2549
2550         * algorithm.c: (binary_search) Fix assertion.
2551
2552 Fri Dec 19 21:31:48 2003  Ben Pfaff  <blp@gnu.org>
2553
2554         * sysfile-info.c: (compare_vectors_by_name) Rewrite.
2555
2556 Fri Dec 19 21:30:24 2003  Ben Pfaff  <blp@gnu.org>
2557
2558         * sort.c: (compare_case_lists) Rewrite.
2559
2560 Fri Dec 19 16:44:22 2003  Ben Pfaff  <blp@gnu.org>
2561
2562         * quicksort.c: Removed (not used).
2563
2564         * quicksort.h: Removed (not used).
2565
2566         * sort.c: Removed blp_quicksort() prototype.
2567
2568 Fri Dec 19 16:42:13 2003  Ben Pfaff  <blp@gnu.org>
2569
2570         * postscript.c: (int_2_compare) Rewrite.
2571         (compare_line) Rewrite.
2572
2573 Fri Dec 19 16:38:35 2003  Ben Pfaff  <blp@gnu.org>
2574
2575         * matrix-data.c (compare_factors) Use lexicographical_compare()
2576         algorithm.
2577         (compare_doubles) New function.
2578         
2579         * algorithm.c: (lexicographical_compare) New algorithm.
2580
2581 Fri Dec 19 16:23:45 2003  Ben Pfaff  <blp@gnu.org>
2582
2583         * matrix-data.c (compare_variables_by_mxd_vartype): Rewrite.
2584
2585 Fri Dec 19 15:54:45 2003  Ben Pfaff  <blp@gnu.org>
2586
2587         * expr-prs.c: (cmp_func) Removed.
2588         (parse_function) Use binary_search() algorithm.
2589         (compare_functions) New function.
2590         (init_func_tab) Use sort() algorithm.
2591
2592         * algorithm.c: (binary_search) New algorithm.
2593
2594 Fri Dec 19 15:50:45 2003  Ben Pfaff  <blp@gnu.org>
2595
2596         * descript.q: (display) Use sort() algorithm instead of qsort().
2597         (compare_func) Removed.
2598         (descriptives_compare_variables) New function.
2599
2600 Fri Dec 19 15:08:38 2003  Ben Pfaff  <blp@gnu.org>
2601
2602         Get rid of AVL trees.  Hashes are more appropriate for everything
2603         PSPP does.
2604
2605         * Makefile.am: (pspp_SOURCES) Remove avl.c, avl.h.
2606         
2607         * avl.c: Removed.
2608
2609         * avl.h: Removed.
2610
2611 Fri Dec 19 14:33:31 2003  Ben Pfaff  <blp@gnu.org>
2612
2613         Much code can be clarified by using C++ STL-like algorithms.  Not
2614         all uses of these algorithms are listed below, only the ones where
2615         the change to an algorithm was the only change of interest.
2616         
2617         * Makefile.am: (pspp_SOURCES) Add algorithm.c, algorithm.h.
2618         
2619         * algorithm.c: New file.
2620
2621         * algorithm.h: New file.
2622
2623         * modify-vars.c: (static var forward) Removed.
2624         (static var positional) Removed.
2625         (compare_variables) Removed.
2626         (struct ordering) New.
2627         (cmd_modify_vars) Use sort() algorithm.
2628         (compare_variables_given_ordering) New function.
2629         (rearrange_dict) Use sort() algorithm.
2630
2631         * sysfile-info.c: (cmd_display) Use sort() algorithm.
2632         (cmp_var_by_name) Removed.
2633
2634 Fri Dec 19 14:26:17 2003  Ben Pfaff  <blp@gnu.org>
2635
2636         Make file handles use a hash table.
2637         
2638         * file-handle.q: (files) Change to hash table, make static.
2639         (cmd_file_handle) Use hash table functions.
2640         (fh_get_handle_by_filename) Ditto.
2641         (fh_get_handle_by_name) Ditto.
2642         (hash_file_handle) New function.
2643         (cmp_file_handle) Rewrite.
2644         (fh_init_files) Use hash table functions.
2645
2646 Fri Dec 19 14:24:38 2003  Ben Pfaff  <blp@gnu.org>
2647
2648         Clean up FREQUENCIES.
2649         
2650         * Makefile.am: (pspp_SOURCES) Remove frequencies.g.
2651
2652         * frequencies.q: Remove a lot of old #if'd out code at the end.
2653         (internal_cmd_frequencies) Use calc() instead of calc_no_weight()
2654         or calc_weight().  Initialize percentile_values.
2655         (calc) New function based on calc_weight() from frequencies.g.
2656         (precalc) Use hash functions.
2657         (static var comparison_func) Removed.
2658         (static var comparison_param) Removed.
2659         (comparison_helper) Removed.
2660         (get_freq_comparator) New function.
2661         (not_missing) New function.
2662         (add_freq) Removed.
2663         (postprocess_freq_tab) Use hash table functions, algorithms,
2664         get_freq_comparator().  Rewrite.
2665         (cleanup_freq_tab) Rephrase.
2666         (add_percentile) Clean up spacing.
2667         (hash_value_numeric) New function.
2668         (hash_value_alpha) New function.
2669         (compare_value_numeric_a) Rewrite.
2670         (compare_value_alpha_a) Rewrite.
2671         (compare_value_numeric_d) Rewrite.
2672         (compare_value_alpha_d) Rewrite.
2673         (compare_freq_numeric_a) Rewrite.
2674         (compare_freq_alpha_a) Rewrite.
2675         (compare_freq_numeric_d) Rewrite.
2676         (compare_freq_alpha_d) Rewrite.
2677         (calc_stats) Clean up mode, percentiles, max.
2678         (dump_statistics) Clean up spacing.
2679         
2680         * frequencies.g: Removed.
2681
2682         * var.h: (struct freq_tab) Change `data' to hash table.
2683
2684 Fri Dec 19 14:15:46 2003  Ben Pfaff  <blp@gnu.org>
2685
2686         * file-handle.h: Remove declaration of global variable `files',
2687         which wasn't used anywhere.
2688
2689         * postscript.c: (add_encoding) Remove superfluous cast.
2690         (line) Ditto.
2691
2692         * sfm-read.c: [linux] (bswap_int32) Drop ntohl() non-portable
2693         version.
2694
2695         * temporary.c: [0] (display_tree) Removed.
2696
2697 Fri Dec 19 14:13:04 2003  Ben Pfaff  <blp@gnu.org>
2698
2699         Implement a new random number generator based on the alleged RC4
2700         algorithm.
2701
2702         * expr-evl.c: (expr_evaluate) Use rng_get_double_normal() instead
2703         of rand_normal().
2704
2705         * random.c: [!HAVE_GOOD_RANDOM] (real_rand) Removed.
2706         [!HAVE_GOOD_RANDOM] (real_srand) Removed.
2707         (macro k) Removed.
2708         (static var V[]) Removed.
2709         (static var Y) Removed.
2710         (static var X2) Removed.
2711         (setup_randomize) Removed.
2712         (shuffle) Removed.
2713         (rand_uniform) Removed.
2714         (rand_normal) Removed.
2715         (struct rng) New structure.
2716         (rng_create) New function.
2717         (rng_destroy) New function.
2718         (swap_byte) New static function.
2719         (rng_seed) New function.
2720         (rng_get_bytes) New function.
2721         (rng_get_int) New function.
2722         (rng_get_unsigned) New function.
2723         (rng_get_double) New function.
2724         (rng_get_double_normal) New function.
2725         (pspp_rng) New function.
2726
2727         * random.h: Sync up to random.c.
2728
2729         * sample.c: (struct sample_trns) Make `frac' unsigned and a
2730         fraction of UINT_MAX, not 65536.
2731         (cmd_sample) Use rng_get_unsigned(), rng_get_double(), UINT_MAX
2732         fraction.
2733
2734         * vfm.c: (open_active_file) No need to call setup_randomize() any
2735         longer.
2736
2737 Fri Dec 19 12:05:56 2003  Ben Pfaff  <blp@gnu.org>
2738
2739         Change dictionary name indexes to use hash tables instead of AVL
2740         trees.
2741
2742         * crosstabs.q: (free_var_dict) Use hash tables.
2743         (crs_custom_tables) Ditto.
2744         (calc_general) Ditto.
2745         (compare_table_entry) Rewrite.
2746         (enum_var_values) Reorder parameters.  All references updated.
2747         Rewrite.
2748
2749         * get.c: (rename_variable) Use hash tables.
2750         (mtf_merge_dictionary) Ditto.
2751
2752         * glob.c: (init_glob) Use hash tables.
2753         (cmp_variable) Removed.
2754
2755         * means.q: (mns_custom_tables) Use hash tables.
2756
2757         * modify-vars.c: (rearrange_dict) Use hash tables.
2758
2759         * rename-vars.c: (cmd_rename_variables) Use hash tables.
2760
2761         * sfm-read.c: (read_header) Use hash tables.
2762         (read_variables) Ditto.
2763
2764         * temporary.c: (new_dictionary) Use hash tables.
2765         (save_dictionary) Ditto.
2766         (restore_dictionary) Ditto.
2767
2768         * var.h: (struct dictionary) Change AVL tree `var_by_name' into
2769         hash table `name_tab'.
2770
2771         * vars-atr.c: [DEBUGGING] (dump_one_var_node) Removed.
2772         [DEBUGGING] (dump_var_tree) Removed.
2773         (find_variable) Use hash tables.
2774         (find_dict_variable) Ditto.
2775         (common_init_stuff) Ditto.
2776         (rename_variable) Ditto.
2777         (clear_variable) Ditto.  Also, remove debug code.
2778         (dup_variable) Use hash tables.
2779
2780         * vars-prs.c: (fill_all_vars) Use hash tables.
2781         (is_dict_varname) Ditto.
2782         (parse_dict_variable) Ditto.
2783         
2784 Fri Dec 19 11:46:23 2003  Ben Pfaff  <blp@gnu.org>
2785
2786         Change value labels to use hash tables instead of AVL trees, and
2787         change value labels into an ADT.
2788
2789         * Makefile.am: (pspp_SOURCES) Add value-labels.c, value-labels.h.
2790         
2791         * value-labels.c: New file.
2792
2793         * value-labels.h: New file.
2794
2795         * apply-dict.c: (cmd_apply_dictionary) Use value label ADT.
2796         Get rid of a stupid use of goto.
2797
2798         * autorecode.c: (compare_alpha_value) Rewrite.
2799         (hash_alpha_value) Ditto.
2800         (compare_numeric_value) Rewrite.
2801         (hash_numeric_value) Ditto.
2802
2803         * frequencies.q: (dump_full) Use value label ADT.
2804
2805         * pfm-read.c: (read_value_label) Use value label ADT.
2806
2807         * pfm-write.c: (write_value_labels) Use value label ADT.
2808
2809         * sfm-read.c: (read_variables) Use value label ADT.
2810         (read_value_labels) Rewrite.
2811
2812         * sfm-write.c: (write_value_labels) Rewrite.
2813
2814         * sysfile-info.c: (cmd_sysfile_info) Use value label ADT.
2815         (display_variables) Ditto.
2816         (describe_variable) Ditto.
2817
2818         * t-test.q: (print_t_groups) Use value label ADT.
2819
2820         * temporary.c: (copy_variable) Use value label ADT.
2821         (free_dictionary) Ditto.
2822
2823         * val-labs.c: (verify_val_labs) Use value label ADT.
2824         (get_label) Ditto.
2825         (debug_print) Ditto.
2826         (val_lab_cmp) Removed.
2827         (inc_ref_count) Removed.
2828         (copy_value_labels) Removed.
2829
2830         * var.h: (struct value_label) Removed.
2831         (struct variable) Change AVL tree `val_lab' into hash table
2832         `val_labs'.
2833
2834         * vars-atr.c: (init_variable) Use value label ADT.
2835         (clear_variable) Ditto.
2836         (free_value_label) Removed.
2837         (free_val_lab) Removed.
2838         (get_val_lab) Removed.
2839         (compare_variables) New function.
2840         (hash_variable) New function.
2841
2842         * vfm.c: (dump_splits) Use value label ADT.
2843
2844 Fri Dec 19 11:18:11 2003  Ben Pfaff  <blp@gnu.org>
2845
2846         Add to the hash table interface.
2847
2848         * hash.c: (hsh_hash_bytes) Add assertion.
2849         (hsh_hash_string) Ditto.
2850         (hsh_clear) Ditto.
2851         (hsh_rehash) Ditto.
2852         (hsh_probe) Ditto.
2853         (hsh_create) Ditto.  Also make minimum `size'.
2854         (hsh_destroy) Rephrase.
2855         (sort_nulls_last) Removed.
2856         (not_null) New function.
2857         (hsh_data) Ditto.
2858         (comparison_helper) Ditto.
2859         (hsh_sort) Rewritten.
2860         (hsh_data_copy) New function.
2861         (hsh_sort_copy) Ditto.
2862         (hsh_insert) Ditto.
2863         (hsh_replace) Ditto.
2864         (hsh_hash_double) Ditto.
2865         (hsh_delete) Fix stupid bug.
2866         
2867 Thu Dec 18 12:27:03 WAST 2003 John Darrington <john@darrington.wattle.id.au>
2868         * added a calculation of the mode to FREQUENCIES
2869
2870 Wed Dec 17 12:53:01 WAST 2003 John Darrington <john@darrington.wattle.id.au>
2871
2872         * moved (un)defs of DEBUGGING to config.h
2873
2874 Mon Dec 15 21:35:59 2003  Ben Pfaff  <blp@gnu.org>
2875
2876         * groff-font.c: (add_kern) Fix indentation.
2877         (add_kern) Use & instead of % to take power-of-2 modulus.
2878         (font_get_kern_adjust) Likewise.
2879
2880 Fri Dec 12 23:54:37 2003  Ben Pfaff  <blp@gnu.org>
2881
2882         * autorecode.c: (recode) Replace stupid use of memcpy() by
2883         memberwise copy.
2884         (hash_alpha_value) Use hsh_hash_bytes().  Get rid of nasty casts.
2885         (hash_numeric_value) Ditto.
2886         (autorecode_proc_func) pool_strdup() was wrong here because the
2887         source string was not null-terminated.  Use new pool_strndup()
2888         instead.
2889
2890         * crosstabs.q: (enum_var_values) Remove superfluous and bizarre
2891         use of hsh_iterator_init().
2892
2893         * data-in.c: (parse_N) Initialize i->v->f.
2894
2895         * flip.c: (cmd_flip) Use memmove(), not memcpy(), to copy
2896         overlapping arrays.
2897
2898         * groff-font.c: Use power-of-2 hash table sizes, not prime.
2899         (groff_read_font) Don't call hsh_next_prime().  Don't call
2900         fclose(NULL).
2901         (static var hash) Remove `size_p', `max_used' members.
2902         (font_char_name_to_index) Don't call hsh_next_prime().  Use
2903         hsh_hash_string() instead of hashpjw(), & instead of %.
2904         (default_font) Don't call hsh_next_prime().
2905
2906         * pool.c: (pool_strndup) New function.
2907         (pool_strdup) Reimplement in terms of pool_strndup.
2908
2909         * postscript.c: (hash_font_entry) Use hsh_hash_string().  Get rid
2910         of nasty casts.
2911         (hash_ps_encoding) Use hsh_hash_string().
2912         (hash_ps_combo) Use hsh_hash_string(), hsh_hash_int().
2913         (hash_filename2font) Use hsh_hash_string().
2914
2915         * som.c: Add #include <stdlib.h>.
2916
2917         * tab.c: (tab_destroy) Don't set t->container after freeing `t'
2918         (by destroying its pool).
2919         
2920 Fri Dec 12 23:18:59 2003  Ben Pfaff  <blp@gnu.org>
2921
2922         Miscellaneous hash table code cleanup:
2923         
2924         * hash.h: (struct hsh_table) Moved into hash.c.
2925         (hsh_count) Ditto, and transformed into function.
2926         (hsh_compare_func) New typedef, used for defining otherwise-long
2927         function types here and in hash.c
2928         (hsh_hash_func) Ditto.
2929         (hsh_free_func) Ditto.
2930         
2931         * hash.c: (struct hsh_table) Renamed `n' to `used', `m' to `size',
2932         `table' to `entries'.  Removed `mp'.  All references updated.
2933         (hsh_clear) Don't shrink entries array; if the hash was this big
2934         once, it probably will be again.
2935         (hsh_rehash) Made static.
2936         (force_hsh_insert) Renamed hsh_force_insert.
2937         (force_hsh_find) Renamed hsh_force_find.
2938
2939         Made hash table sizes powers of 2, because that's fine with any
2940         reasonable hash function and because taking a power-of-2 modulus
2941         is faster than any other:
2942         
2943         (hsh_prime_tab) Removed;
2944         (hsh_next_prime) Ditto.
2945         (next_power_of_2) New function.
2946         (hsh_create) Use next_power_of_2.
2947         (hsh_rehash) Use & instead of %.
2948
2949         Cleaned up hsh_sort:
2950         
2951         (internal_comparison_fn) Removed.
2952         (sort_nulls_last) New function.
2953         (hsh_sort) Removed second parameter, switched to using the new
2954         quicksort() function from quicksort.h to avoid using nasty need
2955         for static variables with qsort().  All references updated.
2956
2957         Changed the hash functions offered, because there are better hash
2958         functions than the ones we had, and cleaned up the names to boot:
2959         
2960         * hash.c: (hashpjw_d) Removed.
2961         (hashpjw) Ditto.
2962         (hsh_hash_bytes) New function.
2963         (hsh_hash_string) New function.
2964         (hsh_hash_int) New function.
2965
2966         Improved the hash table iteration interface:
2967         
2968         * hash.h: (hsh_iterator_init) Removed.
2969         (struct hsh_iterator) Removed `init' member, change `next' to
2970         size_t.
2971
2972         * hash.c: (hsh_foreach) Removed.  All references updated to use
2973         hsh_first/hsh_next instead.
2974         (hsh_first) New function.  Notably, unlike hsh_foreach() it does
2975         not treat a null pointer as an empty hash table.
2976         (hsh_next) New function.
2977
2978         Made deletion possible, though slow:
2979
2980         * hash.c: (locate_matching_entry) New function.
2981         (hsh_find) Use locate_matching_entry().
2982         (hsh_delete) New function also using locate_matching_entry().
2983         (hsh_force_delete) New function.
2984
2985 Fri Dec 12 23:16:10 2003  Ben Pfaff  <blp@gnu.org>
2986
2987         * quicksort.c: New file implementing a sort routine with a
2988         interface better than qsort() because it passes a user-provided
2989         parameter to the sort routine.
2990
2991         * Makefile.am: Add quicksort.c, quicksort.h.
2992
2993 Fri Dec 12 13:31:58 2003  Ben Pfaff  <blp@gnu.org>
2994
2995         * All source files: Get rid of nasty special cases for Checker,
2996         which is pretty obsolete now.
2997
2998 Thu Dec 11 21:38:24 WST 2003 John Darrington <john@darrington.wattle.id.au>
2999
3000         * Fixed a bug apparent when using the FREQUENCIES command with the
3001         html driver.  The html driver was incorrectly trying to display 
3002         empty cells.
3003
3004 Sun Jan  2 21:40:13 2000  Ben Pfaff  <blp@gnu.org>
3005
3006         * Makefile.am: Reorganized.  Put locale dir in version.c instead
3007         of passing it to each compile command.  Only put local gmp libs in
3008         LD_ADD if not installed on system.  Remove `boast' target.
3009
3010         * All source files: struct and union typedefs eliminated.
3011         `sizeof type' replaced by `sizeof object' where practical.  Moved
3012         `unused' qualifiers from start to end of declarations for gcc
3013         2.7.2 compatibility.  Change `while (1)' to `for (;;)'.  Made
3014         assertions on pointers strictly compliant.  Removed _ prefixes on
3015         some function parameter names.
3016
3017         * alloc.c: New source file, containing these external linkage
3018         functions removed from common.c: xmalloc, xcalloc, xrealloc,
3019         xstrdup.
3020
3021         * arena.c: Removed.
3022         
3023         * arena.h: Removed.
3024
3025         * ascii.c: Migrated from arenas to pools.
3026         (struct ascii_driver_ext) ops[], box[], fonts[] changed from
3027         c_string to len_string.  All references changed.
3028         (ascii_option) Signature changed to comply to new output.c
3029         interface.
3030         (count_fancy_chars) Removed.
3031         (delineate) Removed support for rich text.
3032         (ascii_text_metrics) Ditto.
3033         (text_draw) Ditto.
3034         (output_shorts) Change `box', `off', `on' from c_string to
3035         len_string.  Change `remaining' from int to size_t.
3036         (ascii_close_page) Make page numbering less haphazard.
3037
3038         * autorecode.c: Migrate from arenas to pools.
3039
3040         * avl.c: Migrate from arenas to pools.  Synch from libavl 1.4.0.
3041
3042         * bitvector.h: New file containing these macros from misc.h:
3043         SET_BIT, CLEAR_BIT, SET_BIT_TO, TEST_BIT, BIT_INDEX.
3044
3045         * command.c: (struct command) cmd1, cmd2, cmd3 members changed to
3046         word[3].  ncmd removed.
3047         (var empty_string) Removed.
3048         (var cmd_table) Declaration updated.
3049         (var cmdtab) Removed.
3050         (cmp_command) Removed.
3051         (split_words) Rewritten to use strtok_r().
3052         (init_cmd_parser) Renamed cmd_init().  Rewritten.
3053         (find_command) Removed.
3054         (FILE_TYPE_okay) Rewritten.
3055         (cmd_parse) Rewritten.  Semantics of the return value of command
3056         handlers has changed: they must now return one of the new CMD_*
3057         enumerals, rather than a magic value.  This meant that all
3058         commands had to be modified, and they were.
3059         (figure_out_command) New function.
3060
3061         * command.def: Add CORRELATIONS, PEARSON CORRELATIONS.  Add
3062         #defines for INIT, INPU, etc.
3063
3064         * command.h: New CMD_* enum series.
3065         (cur_proc) Make const char *, not char *.
3066         (cmd_init) Prototype.
3067         (cmd_parse) Ditto.
3068
3069         * common.c: Removed.
3070
3071         * common.h: Removed.
3072
3073         * correlations.q: New file.
3074
3075         * crosstabs.q: Migrate from arenas to pools.  Migrate to new-style
3076         q2c.
3077         (custom_tables) Renamed crs_custom_tables().
3078         (custom_variables) Renamed crs_custom_variables().
3079         (calc_integer) Add in some `const' qualifiers.
3080         (table_value_missing) Change from a_string to len_string.
3081         (float_M_suffix) Change from a_string to len_string.
3082
3083         * data-in.c: Rewritten.  All references to
3084         parse_string_as_format() changed to data_in().
3085
3086         * data-in.h: New file.
3087
3088         * data-list.c: Change DLS_* from #define's to enums.  Move from
3089         rpd_msg() to tmsg().
3090         (RPD_ERR) New #define.
3091         (do_reading) Change dfm_push_cust() to dfm_push(), pop_cust() to
3092         dfm_pop().
3093         (read_from_data_list_fixed) Change from old
3094         parse_string_as_format() to new data_in().
3095         (read_from_data_list_free) Ditto.
3096         (read_from_data_list_list) Ditto.
3097         (cmd_repeating_data) Modify approach to checking for end of
3098         command.
3099         (rpd_msg) Removed.
3100         (rpd_parse_record) Change from old parse_string_as_format() to new
3101         data_in().  Change from old convert_format_to_string() to new
3102         data_out().
3103         (read_one_set_of_repetitions) Change dfm_push_cust() to
3104         dfm_push(), pop_cust() to dfm_pop().
3105
3106         * data-out.c: Rewritten.  All references to
3107         convert_format_to_string() changed to data_out().
3108
3109         * descript.q: Migrate to new q2c.
3110         (cmd_descriptives) Removed.
3111         (internal_cmd_descriptives) Renamed cmd_descriptives ().
3112         (custom_variables) Renamed dsc_custom_variables().
3113
3114         * dfm.c: (struct dfm_fhuser_ext) `ln' removed.  All references
3115         removed.
3116         (open_file_r) Initialize h->where.line_number.  Migrate to new
3117         struct string.
3118         (open_file_w) Initialize h->where.line_number.
3119         (read_record) Change from ext->ln to h->where.line_number.
3120         Migrate to struct string.
3121         (dfm_put_record) Rephrased.
3122         (dfm_push_cust) Renamed dfm_push(), rewritten.
3123         (dfm_pop) New function.
3124
3125         * error.c: All references updated.
3126         (glob var error_count) Renamed err_err_count.
3127         (glob var warning_count) Renamed err_warning_count.
3128         (glob var error_already_flagged) Renamed err_already_flagged.
3129         (glob var verbosity) Renamed err_verbosity.
3130         (glob var cust_fn) Removed.
3131         (glob var cust_ln) Removed.
3132         (static var file_loc) New.
3133         (static var nfile_loc) New.
3134         (static var mfile_loc) New.
3135         (tmsg) New function.
3136         (push_cust) Removed.
3137         (pop_cust) Removed.
3138         (msg) Rewritten.
3139         (static var terminating) Removed.
3140         (failure) Renamed err_failure().
3141         (hcf) Renamed err_hcf().
3142         (err_push_file_locator) New function.
3143         (err_pop_file_locator) New function.
3144         (err_location) New function.
3145         (check_error_count) Renamed err_check_count().
3146         (vmsg) Renamed err_vmsg().  Interface changed.
3147         (verbose_msg) Removed.
3148         (err_cond_fail) New function.
3149         (error_break) Renamed err_break().
3150
3151         * error.h: All references updated.
3152         (enum MSG_CLASS_COUNT) Renamed ERR_CLASS_COUNT.
3153         (enum ERR_CLASS_MASK, ERR_VERBOSITY_SHIFT, ERR_VERBOSITY_MASK)
3154         New.
3155         (struct file_locator) New.
3156         (struct error) New.
3157         (macro verbose_msg) Removed.
3158         (macro cond_fail) Removed.
3159
3160         * expr-opt.c: (evaluate_tree) sizeof(char) == 1.
3161
3162         * expr-prs.c: Reorganized.  All references updated.
3163         (exprtypename) Renamed expr_type_name().
3164         (typename) Renamed type_name().
3165         (free_expression) Renamed expr_free().
3166         (parse_expression) Renamed expr_parse().  Uses new type_check()
3167         function.
3168         (init_functab) Renamed init_func_tab().
3169         (type_check) New function.
3170         (parse_or) Rewritten to use new allocate_nonterminal() and
3171         append_nonterminal_arg() functions.
3172         (parse_and) Ditto.
3173         (parse_not) Ditto.
3174         (parse_rel) Ditto.  Also simplified logic.
3175         (parse_add) Ditto.
3176         (parse_mul) Ditto.
3177         (parse_neg) Ditto.
3178         (parse_exp) Ditto.
3179         (SYSMIS_func) Ditto.
3180         (VALUE_func) Rephrased.
3181         (CONCAT_func) Fix memory leak by replacing free by free_node on
3182         lossage.
3183         (generic_str_func) Ditto.
3184         (parse_function) Ditto.  Also rephrasings.  Uses bsearch() to find
3185         function.
3186         (allocate_nonterminal) New function.
3187         (append_nonterminal_arg) New function.
3188         (static func_tab[]) Now at file level.
3189         (cmp_func) Moved.
3190         (init_func_tab) Moved.  Now just uses qsort() to sort func_tab[].
3191
3192         * expr.h: (enum series OP_*) Moved to exprP.h.
3193         (OP_* defines) Ditto.
3194         (struct op_desc) Ditto.
3195         (global ops[]) Ditto.
3196         (struct num_con_node) Ditto.
3197         (struct str_con_node) Ditto.
3198         (struct var_node) Ditto.
3199         (struct lag_node) Ditto.
3200         (struct casenum_node) Ditto.
3201         (struct nonterm_node) Ditto.
3202         (union any_node) Members renamed.
3203         (struct sys_node) Removed.
3204         (struct val_node) Removed.
3205         (operator typedef) Removed.
3206         (typedef exprtype) Removed.
3207         (enum series EX_*) Moved to exprP.h.
3208         (struct expression) Ditto.  Also renamed a lot of the members.
3209         (PXP_* defines) Changed to enums.
3210         (free_node prototype) Moved to exprP.h.
3211
3212         * file-handle.h: (struct file_handle) New member `where'.
3213
3214         * file-handle.q: Migrated to new q2c format.
3215         (prepend_current_directory) Removed (dead code).
3216         (cmd_file_handle) Incorporated all of internal_cmd_file_handle().
3217         (fh_get_handle_by_filename) Removed dead code.
3218         Set new `where' member.
3219
3220         * file-type.c: (file_type_source_read) References to
3221         parse_string_as_format() changed to data_in().
3222         dfm_push_cust()/pop_cust() changed to dfm_push()/dfm_pop().
3223
3224         * filename.c: All references updated.
3225         (init_filename) Renamed fn_init().
3226         (expand_line) Removed.
3227         (macro EXPAND_LINE) Removed.
3228         (interp_vars) Renamed fn_interp_vars().  Now uses st_*() instead
3229         of custom functions.
3230         (gnu_getcwd) Renamed fn_get_cwd(), rewritten.
3231         (tilde_expand) Renamed fn_tilde_expand(), uses ds_*().
3232         (normalize_filename) Renamed fn_normalize().
3233         (search_path) Renamed fn_search_path(), rewritten.
3234         (prepend_dir) Renamed fn_prepend_dir().
3235         (blp_getenv) Renamed fn_getenv().
3236         (blp_dirname) Renamed fn_dirname().
3237         (fn_basename) New function, not used.
3238         (absolute_filename_p) Renamed fn_absolute_p().
3239         (is_special_filename) Renamed fn_special_p().
3240         (file_exists) Renamed fn_exists_p().
3241         (readlink_malloc) Renamed fn_readlink().
3242         (getenv_default) Renamed fn_getenv_default().
3243         (open_file) Renamed fn_open().
3244         (close_file) Renamed fn_close().
3245         (open_file_ext) Renamed fn_open_ext().
3246         (close_file_ext) Renamed fn_close_ext().
3247
3248         * font.h: Migrate from arenas to pools.
3249
3250         * format.c: (parse_format_specifier_name) Deal with ds_* strings.
3251
3252         * frequencies.g: Migrate from arenas to pools.
3253
3254         * frequencies.q: Migrate to new q2c version.  Migrate from arenas
3255         to pools.
3256
3257         * getline.c: All references updated.
3258         (global getl_buf) Changed from char * to struct string.
3259         (static getl_include_path) Ditto.
3260         (global getl_buf_len) Removed.
3261         (global getl_buf_size) Removed.
3262         (getl_include_path) Deal with new getl_buf, getl_include_path.
3263         (getl_uninitialize) New function.
3264         (getl_get_current_directory) Rewritten.
3265         (getl_clear_include_path) Rewritten.
3266         (getl_add_include_dir) Rewritten.
3267         (getl_add_file) Assertion fixed.
3268         (getl_add_virtual_file) Change initial value of `remaining_loops'
3269         from 2 to 1.
3270         (welcome) Rewritten.
3271         (handle_line_buffer) Make static.  Change logic to make
3272         getl_add_virtual_file() change sensible.  Use ds_*() strings.
3273         (getl_read_line) Use ds_*() strings.  Implement SET ECHO.
3274         (getl_close_file) Moved.
3275         (getl_location) New function.
3276
3277         * getline.h: All references updated.
3278         (macro curln) Removed.
3279         (macro curfn) Removed.
3280         (macro am_interactive) Renamed getl_am_interactive.
3281         (macro am_reading_script) Renamed getl_reading_script.
3282
3283         * glob.c: (global fmt_parse_ignore_error) Removed.
3284         (init_glob) Use locale_dir not LOCALEDIR.  Use feholdexcept() on
3285         systems that support it (C99).  Turn off SET ECHO by default.  No
3286         necessary julcal initialization anymore.
3287
3288         * groff-font.c: Migrate from arenas to pools.
3289         (groff_read_font) Use err_push_file_locator().
3290         (groff_read_DESC) Ditto.
3291         (font_msg) Use tmsg().
3292
3293         * hash.c: (hsh_sort) Fix debug code.
3294         [GLOBAL_DEBUGGING] Include stdio.h.
3295
3296         * hash.h: (macro force_hsh_insert) Rephrase.
3297
3298         * heap.c: Rewritten.
3299         
3300         * heap.h: Rewritten.
3301
3302         * html.c: (html_option) Change from outp_value to struct string.
3303         (postopen) Change from curfn to getl_location().
3304         (escape_string) Remove rich-text code.  Signature changed.
3305         (output_tab_table) Switch from a_string to struct len_string.
3306         Remove rich text support.
3307
3308         * lexer.c: All references updated.  Largely rewritten.  Major
3309         changes listed below.  Removed tagged quote support.  Adapted to
3310         struct string tokstr.
3311         (global tokstr) Changed to struct string.
3312         (global tokstr_size) Removed.
3313         (global tokstr_len) Removed.
3314         (global tokid) New.
3315         (global tokint) Removed.
3316         (global toklongstr) Removed.
3317         (C* defines) Removed.
3318         (static tbl[]) Removed.
3319         (static id[]) Removed.
3320         (static une[]) Removed.
3321         (discard_line) Renamed lex_discard_line().
3322         (get_entire_line) Renamed lex_entire_line().
3323         (get_rest_of_line) Renamed lex_rest_of_line().
3324         (get_dotted_rest_of_line) Merged into lex_rest_of_line().
3325         (make_hexit) Removed.
3326         (syntax_error) Renamed lex_error().  Return value removed.
3327         (get_token_representation) Renamed lex_token_representation().
3328         (putback) Renamed lex_put_back().
3329         (putfwd) Renamed lex_put_forward().
3330         (convert_negative_to_dash) Renamed lex_negative_to_dash().
3331         (set_prog) Renamed lex_set_prog().
3332         (init_lex) Renamed lex_init().
3333         (reset_eof) Renamed lex_reset_eof().
3334         (lookahead) Renamed lex_look_ahead().
3335         (check_id) Rewritten.
3336         (yylex) Renamed lex_get(), rewritten.
3337         (lex_end_of_command) New function.  Many commands were rephrased
3338         using this.
3339         (lex_integer_p) New function.  Replaces compare of tokint against
3340         NOT_LONG.
3341         (lex_integer) New function.  Replaces tokint.
3342         (match_tok) Renamed lex_match().
3343         (match_id) Renamed lex_match_id().
3344         (match_int) Renamed lex_match_int().
3345         (force_match_id) Renamed lex_force_match_id(), added return value.
3346         (force_match) Renamed lex_force_match(), added return value.
3347         (force_string) Renamed lex_force_string(), added return value.
3348         (force_int) Renamed lex_force_int(), added return value.
3349         (lex_id_match_len) New function.
3350         (id_match) Renamed lex_id_match(), rewritten.
3351         (get_line) Renamed lex_get_line().
3352         (preprocess_line) Renamed lex_preprocess_line().
3353         (tokname) Renamed lex_token_name().
3354         (bin_value_func) Removed.
3355         (oct_value_func) Removed.
3356         (hex_value_func) Removed.
3357         (unexpected_eof) New function.
3358         (convert_numeric_string_to_char_string) New function.
3359         (parse_string) Rewritten, signature changed.
3360         (add_tokstr_char) Removed.
3361         (add_tokstr_unsigned) Removed.
3362         (add_tokstr_string) Removed.
3363         (parse_tagged_quote) Removed.
3364         (skip_comment) Renamed lex_skip_comment().
3365
3366         * lexer.h: All references updated.
3367         (macro is_id1) Renamed CHAR_IS_ID1.
3368         (macro is_idn) Renamed CHAR_IS_IDN.
3369         (token names ID, NUM, STRING, STOP, ... WITH, EXP) Renamed with
3370         prefix T_: T_ID, T_NUM, T_STRING, T_STOP, ... T_WITH, T_EXP.
3371         (macro get_token) Removed.
3372         (macro id_match) Removed.
3373         (macro force_match_id) Removed.
3374         (macro force_match) Removed.
3375         (macro force_string) Removed.
3376         (macro force_int) Removed.
3377         (macro force_num) Removed.
3378         (macro force_id) Removed.
3379
3380         * lexerP.h: Removed.
3381
3382         * list.q: Migrated to new q2c format.
3383         (write_line) Deal with struct len_string.
3384         (write_varname) Ditto.
3385         (write_fallback_headers) Ditto.
3386
3387         * magic.c: New file, incorporating the following global variables
3388         previously in other files: endian, second_lowest_value.  And both
3389         of those are conditional on #define's.
3390
3391         * magic.h: New file, incorporating the following global variable
3392         declarations: endian, second_lowest_value, and the following macro
3393         declarations: NOT_DOUBLE, NOT_LONG, NOT_INT.
3394
3395         * main.c: Added declarations of pgmname, finished, curdate,
3396         start_interactive.
3397         (main) Call new parse_script() function.
3398         (parse_script) New function.
3399         (execute_command) New function.
3400         (dump_token) Removed.
3401         (handle_error) New function.
3402
3403         * matrix.c: New file.
3404
3405         * matrix.h: New file.
3406
3407         * matrix-data.c: Migrated from arenas to pools.
3408         (mget_token) Change from parse_string_as_format() to data_in().
3409
3410         * means.q: Migrate to new q2c.
3411         (custom_tables) Renamed mns_custom_tables().
3412         (custom_crossbreak) Renamed mns_custom_crossbreak().
3413         (custom_variables) Renamed mns_custom_variables().
3414
3415         * mis-val.c: (static var width) Changed from `int' to `size_t'.
3416         (parse_varnames) Prototype.
3417         (parse_numeric) Rephrasings.
3418         (parse_alpha) Adapt to new struct string tokstr.
3419
3420         * misc.c: (intlog10) Rewritten.
3421         (spacing) Removed.
3422         (ansi_rand) Renamed real_rand(), moved into random.c.
3423         (ansi_srand) Renamed real_srand(), moved into random.c.
3424         (setup_randomize) Moved to random.c.
3425         (rand_uniform) Ditto.
3426         (rand_normal) Ditto.
3427         (rand_simple) Ditto.
3428         (get_config_line) Removed.
3429         (reverse) Removed (dead code).
3430
3431         * misc.h: (macro SET_BIT) Moved to bitvector.h.
3432         (macro CLEAR_BIT) Ditto.
3433         (macro TEST_BIT) Ditto.
3434         (macro SET_BIT_TO) Ditto.
3435         (macro BIT_INDEX) Ditto.
3436
3437         * output.c: (outp_read_devices) Move to err_push_file_locator()
3438         from push_cust().  Use struct string.
3439         (expand_op_tokstr) Removed.
3440         (static var op_tokstr) Changed to struct string.
3441         (static var op_tokstr_size) Removed.
3442         (tokener) Rephrasings.  Use struct string.
3443         (parse_options) Use struct string.
3444         (destroy_driver) Fix assertion.
3445         (outp_get_paper_size) Move to err_push_file_locator().
3446         [0] Removed dead code.
3447         (outp_string_width) Move to len_string.
3448
3449         * output.h: Comment fixes.
3450         (TAG_* enum series) Removed.
3451         (struct outp_value) Removed.
3452         (enum OUTP_T_FANCY) Removed.
3453         (struct outp_text) `s' changed from a_string to len_string.
3454         (struct outp_class) `option' change arg 3 from outp_value to
3455         struct string.
3456
3457         * pfm-read.c: (corrupt_msg) Rewritten.
3458
3459         * pfm-write.c: (bufwrite) Fix assertion.
3460
3461         * pool.c: New file, reference version.
3462
3463         * pool.h: New file, reference version.
3464
3465         * postscript.c: (ps_font_sizes) Fix assertion.
3466         (ps_option) Change arg 3 from outp_value to struct string.
3467         Adapt to struct string.
3468         (macro output_line) Removed.
3469         (macro add_string) Removed.
3470         (output_encodings) Adapted to struct string.  Moved to
3471         err_push_file_locator().
3472         (find_encoding_file) Fix assertion.
3473         (read_ps_encodings) Move to err_push_file_locator().
3474         (postopen) Use getl_location() instead of curfn.
3475         (out_text_plain) Move to len_string.
3476         (text) Ditto.  Remove rich text support.
3477
3478         * print.c: (cmd_print) Remove now-unneeded resource cleanup code.
3479         (cmd_print_eject) Ditto.
3480         (cmd_write) Ditto.
3481         (internal_cmd_print) Now cleans up after itself.  Uses
3482         fh_parse_file_handle() now.
3483         (cmd_print_space) Use PXP_NUMERIC to type-check.
3484
3485         * q2c.c: Overhauled.  Removed _("") i18n support.  All references
3486         updated.  All output functions updated to handle structures rather
3487         than local or static variables.  Adapt to new PSPP lex_*()
3488         functions.
3489         (macro _) Removed.
3490         (macro N_) Removed.
3491         (macro MAX_N_SBC) Removed.
3492         (global bare) Removed.
3493         (enum STRING) Renamed T_STRING.
3494         (enum ID) Renamed T_ID.
3495         (get_buffer) Buffer size increased.
3496         (strlower) Renamed st_lower(), rephrased.
3497         (strupper) Renamed st_upper(), rephrased.
3498         (skip_ws) New function.
3499         (get_line) Don't special-case any types of lines (like those
3500         beginning with ! or $, for instance).
3501         (get_token) Renamed lex_get().  Rephrased.
3502         (static var `prefix') New.
3503         (parse) New function.
3504         (parse_setting) Minor rephrasing.
3505         (dump_specifier_vars) Ditto.
3506         (make_identifier) Put null terminator on identifier, duh.
3507         (dump_vars) Renamed dump_declarations().  Never indent.  Never
3508         static.  Output changed entirely.
3509         (dump_specifier_init) Rephrase.
3510         (dump_vars_init) No index variable needed.  Other modifications.
3511         (dump_parser) Don't parse command name.  Do dump functions instead
3512         of just code fragments.
3513         (dump_free) Dump function instead of code fragment.
3514         (recognize_directive) New function.
3515         (main) Use recognize_directive().  Don't rely on magic $ line
3516         beginning: instead, parse comments.  Update list of headers.
3517
3518         * random.c: New file, containing the following functions:
3519         real_rand(), real_srand(), setup_randomize, shuffle, rand_uniform,
3520         rand_normal, rand_simple.
3521
3522         * random.h: New file.
3523
3524         * recode.c: (cmd_recode) Merge internal_cmd_recode() into this
3525         function.  `max_src_width', `max_dst_width' changed to size_t.
3526         (internal_cmd_recode) Removed.
3527         (parse_dest_spec) Merge similar cases.
3528         (parse_src_spec) Add assertion.
3529
3530         * repeat.c: (recognize_keyword) New function.
3531         (internal_cmd_do_repeat) Parse and handle PRINT keyword on END
3532         REPEAT.  Improve recognition of END REPEAT (use
3533         recognize_keyword()).  Move from curfn to getl_location().  Use
3534         struct string.
3535                 
3536         (perform_DO_REPEAT_substitutions) Adapt to struct string.
3537
3538         * set.q: Adapt to new q2c.
3539         (cmd_set) Range-check some values better.
3540         (custom_blanks) Renamed stc_custom_blanks().
3541         (custom_length) Renamed stc_custom_length().
3542         (custom_results) Renamed stc_custom_results().
3543         (custom_seed) Renamed stc_custom_seed().
3544         (custom_width) Renamed stc_custom_width().
3545         (custom_format) Renamed stc_custom_format().
3546         (custom_journal) Renamed stc_custom_journal().
3547         (custom_color) Renamed stc_custom_color().
3548         (custom_listing) Renamed stc_custom_listing().
3549         (custom_disk) Renamed stc_custom_disk().
3550         (custom_log) Renamed stc_custom_log().
3551         (custom_rcolor) Renamed stc_custom_rcolor().
3552         (custom_viewlength) Renamed stc_custom_viewlength().
3553         (custom_workdev) Renamed stc_custom_workdev().
3554
3555         * settings.h: Not necessary to include format.h any longer.
3556
3557         * sfm-read.h: (macro bswap_int32) Moved here from sfmP.h.
3558         (corrupt_msg) Rewritten.
3559
3560         * sort.c: Adapt to rewritten heap ADT.
3561
3562         * str.c: (aa_strcpy) Removed.
3563         (ab_strcpy) Removed.
3564         (ac_strcpy) Removed.
3565         (ba_strcpy) Removed.
3566         (bb_strcpy) Removed.
3567         (ca_strcpy) Removed.
3568         (aa_strdup) Removed.
3569         (aa_strdupcpy) Removed.
3570         (ba_strdup) Removed.
3571         (sa_strdup) Removed.
3572         (memrev) Renamed mm_reverse().
3573         (memrmem) Renamed mm_find_reverse().
3574         (cmp_str) Renamed st_compare_pad().
3575         (strmaxcpy) Removed.
3576         (strbarepadcpy) Renamed st_bare_pad_copy(), signature changed.
3577         (strbarepadlencpy) Renamed st_bare_pad_len_copy(), signature
3578         changed.
3579         (strpadcpy) Renamed st_pad_copy(), signature changed.
3580         (blpstrset) Removed.
3581         (ds_create) New function.
3582         (ds_init) New function.
3583         (ds_replace) New function.
3584         (ds_destroy) New function.
3585         (ds_clear) New function.
3586         (ds_extend) New function.
3587         (ds_shrink) New function.
3588         (ds_truncate) New function.
3589         (ds_length) New function.
3590         (ds_size) New function.
3591         (ds_value) New function.
3592         (ds_end) New function.
3593         (ds_concat) New function.
3594         (ds_concat_buffer) New function.
3595         (ds_printf) New function.
3596         (ds_putchar) New function.
3597         (ds_getline) New function.
3598         (ds_get_config_line) New function derived from the old
3599         misc.c:get_config_line().
3600         (ls_create) New function.
3601         (ls_create_buffer) New function.
3602         (ls_init) New function.
3603         (ls_shallow_copy) New function.
3604         (ls_destroy) New function.
3605         (ls_null) New function.
3606         (ls_null_p) New function.
3607         (ls_empty_p) New function.
3608         (ls_length) New function.
3609         (ls_value) New function.
3610         (ls_end) New function.
3611
3612         * str.h: Reformatted.
3613         (struct a_string) Removed.
3614         (struct b_string) Removed.
3615         (struct c_string) Removed.
3616         (struct len_string) New.
3617         (struct string) New.
3618         (macro as_streq) Removed.
3619         (macro bs_streq) Removed.
3620         (macro cs_streq) Removed.
3621         (macro sa_streq) Removed.
3622         (macro sb_streq) Removed.
3623         [__GNUC__] (inline function ds_putchar) New function.
3624         [__GNUC__] (inline function ds_length) New function.
3625         [__GNUC__] (inline function ds_value) New function.
3626         [__GNUC__] (inline function ds_end) New function.
3627
3628         * sysfile-info.c: (cmd_sysfile_info) Rephrased.
3629         (display_vectors) Fix missing i18n.
3630
3631         * t-test.q: Migrate to new q2c.
3632
3633         * tab.c: Migrate from arenas to pools.
3634         (tab_create) Use struct len_string.
3635         (tab_realloc) Ditto.
3636         (text_format) Ditto.
3637         (tab_joint_text) Ditto.
3638         (tab_natural_width) Remove rich text support.
3639         (tab_natural_height) Ditto.
3640         (tab_output_text) Handle TAT_FIX.
3641         (tab_raw) Change arg from a_string to len_string.
3642         (tabi_driver) Fix assertion.  Use struct len_string.
3643         (render_strip) Use struct len_string.  Remove rich text support.
3644         Add `const' qualifiers.
3645
3646         * tab.h: (enum TAB_RICH) Remove.
3647         (enums TAB_COL_NONE, TAB_COL_DONE) New.  Where appropriate,
3648         SOM_COL_* updated to read TAB_COL_*.
3649         (struct tab_table) Change arena to pool.  Change a_string to
3650         len_string.
3651
3652         * temporary.c: (restore_dictionary) Rewrite Checker code.
3653
3654         * var.h: (macros MAX_SHORT_STRING, MIN_LONG_STRING, SYSMIS,
3655         LOWEST, HIGHEST) Moved here from common.h.
3656         (typedef any_trns) Removed.  All references changed to `struct
3657         trns_header'.
3658
3659         * vars-atr.c: (force_create_variable) Fix assertion.
3660         (force_dup_variable) Fix assertion.
3661         
3662 Thu Jun  3 18:40:42 1999  Ben Pfaff  <blp@gnu.org>
3663
3664         Using alphanumeric variables in functions under AGGREGATE
3665         segfaulted.  Fixed.  Thanks to Dr. Dirk Melcher
3666         <BZN-mdksh@t-online.de> for reporting this bug.
3667         
3668         * aggregate.c: (parse_aggregate_functions) When setting the
3669         FSTRING bit, also allocate memory for the `string' member of
3670         agr_next.
3671         (free_aggregate_functions) Free iter->string.  Don't use the
3672         non-function bits when indexing the array of functions.
3673         [DEBUGGING] (debug_print) Don't use the non-function bits when
3674         indexing the array of functions.        
3675
3676 Sun May 30 00:00:54 1999  Ben Pfaff  <blp@gnu.org>
3677
3678         Under certain circumstances, the final case would be omitted from
3679         the results of an AGGREGATE operation.  Fixed.  Thanks to Dr. Dirk
3680         Melcher <BZN-mdksh@t-online.de> for reporting this bug.
3681         
3682         * aggregate.c (agr_00x_end_func): Increment number of cases in
3683         sink before writing case.  For streams that keep track of how many
3684         cases there are based on this value, this means that the last case
3685         will be read in on the next stream read.
3686
3687 Sat May 29 22:03:31 1999  Ben Pfaff  <blp@gnu.org>
3688
3689         Undefined behavior was invoked by referencing a freed pointer.
3690         
3691         * vfm.c (memory_stream_write): Free pointer *after* checking for
3692         non-null status.
3693
3694 Sat May 29 22:02:22 1999  Ben Pfaff  <blp@gnu.org>
3695
3696         A wrong record size was displayed when paging the active file to
3697         disk.
3698         
3699         * vfm.c: (memory_stream_write) Fix off-by-one error.
3700
3701 Sat May 29 21:50:26 1999  Ben Pfaff  <blp@gnu.org>
3702
3703         Not having enough temporary space for sorting caused a core dump.
3704         Fixed.
3705         
3706         * sort.c: (allocate_cases) Initialize i.
3707
3708 Sat May 29 21:40:54 1999  Ben Pfaff  <blp@gnu.org>
3709
3710         Syntax errors in function descriptions on AGGREGATE caused core
3711         dumps.  Fixed.
3712         
3713         * aggregate.c (cmd_aggregate): Don't free agr_dict after calling
3714         free_aggregate_functions(), since that function already frees
3715         agr_dict.
3716         
3717 Sat May 29 21:06:10 1999  Ben Pfaff  <blp@gnu.org>
3718
3719         A null pointer was dereferenced, causing a core dump, when
3720         PERCENTILES was specified on FREQUENCIES.  This fixes the problem,
3721         but PSPP still doesn't calculate percentiles.  Thanks to Regnor
3722         Jernsletten <rjernsle@eunet.no> for reporting this problem.
3723         
3724         * arena.c: (arena_malloc) If the arena hasn't been initialized
3725         already, initialize it.
3726
3727 Sat May 29 20:47:29 1999  Ben Pfaff  <blp@gnu.org>
3728
3729         * Makefile.cygwin: New file supplied by Hankin <hankin@dunno.com>
3730         for compilation with Cygnus Windows B20.  Not used by other
3731         systems.
3732
3733 Sat May 29 20:36:04 1999  Ben Pfaff  <blp@gnu.org>
3734
3735         SORT always sorted in ascending order.  Fixed.  Thanks to Dr. Dirk
3736         Melcher <BZN-mdksh@t-online.de> for reporting this bug.
3737
3738         * sort.c: (compare_case_lists) Reverse sense of comparison if
3739         sorting in descending order.
3740         (compare_record) Ditto.
3741
3742 Tue Mar  9 13:18:54 1999  Ben Pfaff  <blp@gnu.org>
3743
3744         SPLIT FILE with a string variable caused a core dump.  Fixed.
3745
3746         * vfm.c: If the variable is a string then make a temporary value
3747         struct pointing to it.  The underlying problem is a lot bigger
3748         than this (see TODO) but this is a stopgap for the simple case at
3749         least.
3750         
3751 Tue Mar  9 13:15:53 1999  Ben Pfaff  <blp@gnu.org>
3752
3753         Nested INCLUDEs didn't work.  Fixed.
3754
3755         * getline.c: (getl_include) Set first_line to NULL in allocated
3756         structure.
3757
3758 Tue Mar  9 13:13:46 1999  Ben Pfaff  <blp@gnu.org>
3759
3760         The MATCH FILES procedure set the values of variables not present
3761         to 0.  It should have been SYSMIS.  This is now fixed.
3762
3763         * get.c: (mtf_delete_file_in_place) Replace 0.0 by SYSMIS.
3764
3765 Tue Mar  9 12:52:23 1999  Ben Pfaff  <blp@gnu.org>
3766
3767         The REMARK command was too aggressive about skipping lines.  It
3768         didn't like being the last command in a file.
3769
3770         * command.c: (cmd_remark) Call get_entire_line() instead of
3771         get_line().
3772
3773 Tue Mar  9 12:48:05 1999  Ben Pfaff  <blp@gnu.org>
3774
3775         Comment parsing wasn't consistent with the rest of the code in its
3776         idea of where one command ends and another starts.  This meant
3777         that sometimes commands would be mysteriously ignored.  Thanks to
3778         Dr. Dirk Melcher <BZN-mdksh@t-online.de> for reporting this bug.
3779          
3780         * command.c: (parse_cmd) Hand off comment parsing to new function
3781         skip_comment() in lexer.c.
3782         * lexer.c: (skip_comment) New function.
3783
3784 Wed Jan 20 20:22:07 1999  Ben Pfaff  <blp@gnu.org>
3785
3786         The TABLE subcommand on MATCH FILES worked only erratically at
3787         best.  This fixes it.  Thanks to Dr. Dirk Melcher
3788         <BZN-mdksh@t-online.de> for reporting this bug.
3789
3790         * get.c: (mtf_compare_BY_values) When comparing string values, a
3791         difference of 1 is still a difference :-)
3792         (mtf_processing) Inverted TABLE reading logic fixed.  Also don't
3793         advance TABLE files automatically when matched.  Comment fixes.
3794
3795 Tue Jan 19 22:32:31 1999  Ben Pfaff  <blp@gnu.org>
3796
3797         VARIABLE LABELS rejected a slash before the first variable
3798         specification, contradicting the documentation.  Thanks to Walter
3799         M. Gray <graywm@northernc.on.ca> for reporting this bug.
3800
3801         * var-labs.c: (cmd_variable_labels) Ignore a leading slash in
3802         command specification.
3803
3804 Tue Jan 19 22:29:54 1999  Ben Pfaff  <blp@gnu.org>
3805
3806         Because of an incorrect optimization in memory allocation,
3807         CROSSTABS sometimes segfaulted when asked to output multiple
3808         tables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
3809         reporting this bug.
3810
3811         * crosstabs.q: (postcalc) New variables maxcols, maxcells, which
3812         are passed to output_pivot_table() for its use.
3813         (output_pivot_table) Instead of assuming the number of columns is
3814         constant, keep track with maxcols.  In general mode, use maxcells
3815         to determine whether more matrix cells need to be allocated.    
3816
3817 Tue Jan 19 22:27:46 1999  Ben Pfaff  <blp@gnu.org>
3818
3819         CROSSTABS didn't display value labels for column and row
3820         variables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
3821         reporting this bug.
3822
3823         * crosstabs.q: (table_value_missing) If the specified value has a
3824         value label for this variable, then show it instead of the raw
3825         value.
3826         (display_dimensions) Delegate display of value_labels to
3827         table_value_missing.
3828
3829 Mon Jan 18 20:04:06 1999  Ben Pfaff  <blp@gnu.org>
3830
3831         WRITE didn't write line ends.  Fixed.  Thanks to Dr. Dirk Melcher
3832         <BZN-mdksh@t-online.de> for reporting this bug.
3833
3834         * print.c: (print_trns_proc) Write (CR/)LF if PRINT is used _or_
3835         if the file isn't declared as binary.
3836
3837 Mon Jan 18 19:56:45 1999  Ben Pfaff  <blp@gnu.org>
3838
3839         MATCH FILES corrupted memory and dumped core on some syntax
3840         errors.  Fixed.
3841
3842         * get.c: (cmd_match_files) Set file->handle to NULL before
3843         jumping to lossage.
3844         (mtf_free_file) Don't free a null dictionary.   
3845
3846 Mon Jan 18 19:27:57 1999  Ben Pfaff  <blp@gnu.org>
3847
3848         MATCH FILES should set numeric values not available to the
3849         system-missing value, not to 0.  Thanks to Dr. Dirk Melcher
3850         <BZN-mdksh@t-online.de> for reporting this bug.
3851
3852         * get.c: (mtf_processing) Set unused records to system-missing,
3853         not 0.
3854
3855 Mon Jan 18 15:06:46 1999  Ben Pfaff  <blp@gnu.org>
3856
3857         KEEP didn't work properly on the SAVE procedure.  Fixed.  Thanks
3858         to Ralf Geschke <ralf@kuerbis.org> for reporting this bug.
3859
3860         * temporary.c: (save_dictionary) Initialize var_by_name AVL tree
3861         in newly created dictionary, and add each copied variable to the
3862         tree.
3863  
3864 Mon Jan 18 15:04:48 1999  Ben Pfaff  <blp@gnu.org>
3865
3866         Memory leak fix.
3867         
3868         * get.c: (trim_dictionary) Free variable list for KEEP after
3869         finishing with it.
3870
3871 Mon Jan 18 12:57:36 1999  Ben Pfaff  <blp@gnu.org>
3872
3873         Some systems didn't like the way open_file was coded.  Thanks to
3874         Hankin <hankin@rogue.consultco.com> for pointing this out.
3875
3876         * filename.c: (open_file) Don't try to store stdin, stdout,
3877         stderr as part of an array, because that doesn't always work.
3878
3879 Mon Jan 18 12:53:27 1999  Ben Pfaff  <blp@gnu.org>
3880
3881         The SAVE procedure didn't save long string variables properly.
3882         Fixed by this patch.  Thanks to Hankin
3883         <hankin@rogue.consultco.com> for this patch.
3884         
3885         * sfm-write.c: (write_variable) Fix off-by-one error in writing
3886         out variable pad records.
3887
3888 Tue Jan  5 14:29:27 1999  Ben Pfaff  <blp@gnu.org>
3889
3890         Previously, if PRINT SPACE were given a negative argument, it
3891         would report an error, then spin in an (almost) infinite loop.
3892         This fixes that behavior.
3893
3894         * print.c: (print_space_trns_proc) After reporting a negative
3895         argument, set number of lines to print to 1.
3896
3897 Tue Jan  5 13:59:55 1999  Ben Pfaff  <blp@gnu.org>
3898
3899         SPSS 8.0 outputs some new record types in its system files, and it
3900         allows longer value labels.  Accept these system files.
3901
3902         * sfm-read.c: (sfm_read_dictionary) Ignore record type 7 subtype
3903         11 emitted by SPSS 8.0.
3904         
3905 Tue Jan  5 13:55:50 1999  Ben Pfaff  <blp@gnu.org>
3906
3907         The LIST procedure was too conservative in allocating space for
3908         buffers, which caused a bug that only showed up with very long
3909         output variables.  Thanks to Hankin <hankin@dunno.com> for this
3910         bug report.
3911
3912         * list.q: (determine_layout) Allocate 1022 bytes instead of 256.
3913
3914 Tue Jan  5 13:34:34 1999  Ben Pfaff  <blp@gnu.org>
3915
3916         Typo meant string format specifiers weren't checked properly.  I
3917         think that Hankin <hankin@dunno.com> sent me this report, but I'm
3918         willing to be corrected on this point.
3919  
3920         * format.c: (check_string_specifier) Fix obvious typo.  
3921
3922 Tue Jan  5 12:50:42 1999  Ben Pfaff  <blp@gnu.org>
3923
3924         Using $CASENUM in an expression didn't work.  Here's a fix.
3925         Thanks to Dirk Melcher <BZN-mdksh@t-online.de> for reporting this
3926         bug.
3927          
3928         * expr-evl.c: (evaluate_expression) Add OP_CASENUM case.
3929
3930         * expr-opt.c: (dump_node) OP_CASENUM is acceptable.
3931
3932 Tue Jan  5 12:47:48 1999  Ben Pfaff  <blp@gnu.org>
3933
3934         The changes in 0.2.1 to fix DATA LIST FREE parsing broke some
3935         other behavior, *sigh*.  This patch hopefully fixes that.  This
3936         time I've actually tested it.
3937
3938         Thanks to Hankin <hankin@dunno.com> for reporting this bug.
3939
3940         * data-list.c: (read_from_data_list_free,
3941         read_from_data_list_list) Call parse_string_as_format() directly
3942         without mucking around with the field width.
3943
3944 Tue Jan  5 12:31:19 1999  Ben Pfaff  <blp@gnu.org>
3945
3946         Occasionally, you may encounter a script that wants to be
3947         interpreted in interactive mode.  Make -i emulate this behavior to
3948         allow such scripts to be executed with PSPP.
3949
3950         Thanks to Hankin <hankin@dunno.com> for reporting this behavior.
3951
3952         * cmdline.c: (pre_syntax_message[]) Update -i description.
3953
3954         * lexer.c: (preprocess_line) When getl_interactive is 2 (i.e.,
3955         when -i is given on the command line) don't treat unindented lines
3956         as starting a new command.
3957
3958 Tue Jan  5 12:30:10 1999  Ben Pfaff  <blp@gnu.org>
3959
3960         In conjunction with egcs 1.1.1, Checker emits some bogus warnings,
3961         mostly caused by local initialized aggregates.  After egcs is
3962         fixed upstream these can be removed, but for now they're not a big
3963         deal.
3964         
3965         * ascii.c: (ascii_postopen_driver) Checker chokes on local
3966         initialized arrays.  Avoid this.
3967
3968         * sfm-write.c: (sfm_write_dictionary) Don't use a local
3969         initialized struct.
3970
3971 Tue Jan  5 12:07:24 1999  Ben Pfaff  <blp@gnu.org>
3972
3973         egcs 1.1.1 has some new warnings relative to gcc 2.8.1, which the
3974         following changes avoid.  Currently I compile sources with egcs
3975         1.1.1 and gcc 2.7.2.3 before sending them out.
3976
3977         * apply-dict.c: (apply_dict) Use new avl_traverser_init() macro.
3978         
3979         * ascii.c: (option_tab[]) Initialize all struct members.
3980
3981         * avl.h: (avl_traverser_init) New macro.
3982         
3983         * command.c: (DEFCMD, UNIMPL macros, cmd_table[]) Initialize all
3984         struct members.
3985
3986         * crosstabs.q: (enum_var_values) Use new hsh_iterator_init()
3987         macro.
3988
3989         * hash.c: Comment fix.
3990
3991         * hash.h: (hsh_iterator_init) New macro.
3992
3993         * html.c: (option_tab[]) Initialize all struct members.
3994
3995         * pfm-write.c: (write_value_labels) Use new avl_traverser_init()
3996         macro.
3997
3998         * postscript.c: (option_tab[]) Initialize all struct members.
3999         (output_encodings, preclose, dump_lines) Use new
4000         hsh_iterator_init() macro.
4001
4002         * sfm-write.c: (write_value_labels) Use new avl_traverser_init()
4003         macro.
4004
4005         * sysfile-info.c: (describe_variable) Use new avl_traverser_init()
4006         macro.
4007
4008 Thu Nov 19 12:32:45 1998  Ben Pfaff  <blp@gnu.org>
4009
4010         * data-in.c: Examined each of the parsing functions to make sure
4011         that they wouldn't dump core if they were passed a string of the
4012         wrong length, since now the DATA LIST FREE/LIST routines don't
4013         check for field width before passing it to the data parser.
4014         (parse_RBHEX, parse_AHEX) Reject odd length input.
4015         (parse_string_as_format) Reject input that's too short or too
4016         long.
4017
4018         * data-list.c: Before, the DATA LIST FREE/LIST routines would pad
4019         a field to its entire declared output width then pass it to the
4020         data-in parsing routines.  This contradicted the documented
4021         behavior.  This is fixed in these changes.  Thanks to Mark H. Wood
4022         <mwood@IUPUI.Edu>.  In addition, this fixes a few more details of
4023         free-format parsing that differed from SPSS.
4024         (cut_field) Commas and spaces are treated identically.  Returns
4025         the proper column instead of a fixed 1 value.
4026         (parse_field) Removed.
4027         (read_from_data_list_free, read_from_data_list_list) Call
4028         parse_string_as_format directly instead of parse_field.
4029
4030         * heap.c: (heap_delete) Stylistic fixes.
4031
4032 Sun Aug  9 11:12:13 1998  Ben Pfaff  <blp@gnu.org>
4033
4034         * loop.c: (loop_2_trns_proc) Formatting fix.
4035
4036         * sel-if.c: (cmd_filter) Set FILTER_before_TEMPORARY.
4037
4038         * var.h: (glob var FILTER_before_TEMPORARY) New global var.
4039
4040         * vfm.c: (macro FILTERED) New.
4041         (static var filter_var) New.
4042         (process_active_file_write_case) Use FILTERED.
4043         (setup_filter) Set filter_var.
4044         (close_active_file) Delete the filter if not
4045         FILTER_before_TEMPORARY.
4046         (procedure_write_case) Use FILTERED.
4047
4048 Sat Aug  8 00:20:14 1998  Ben Pfaff  <blp@gnu.org>
4049
4050         * crosstabs.q: Changed /PIVOT={ON,OFF} to /FORMAT={PIVOT,NOPIVOT}.
4051
4052         * data-in.c: (parse_day_count) Message fix.
4053         (parse_month) Style fix.
4054
4055         * data-list.c: (struct data_list_pgm) New member eof.
4056         (cmd_data_list) Init eof to 0.
4057         (do_reading) Implement the /END subcommand and read-past-eof
4058         checking.
4059
4060         * do-if.c: Include stdio.h when debugging.
4061         (cmd_else_if) Make sure the command is .-terminated.
4062
4063         * glob.c: (init_glob) Capitalize the command prompt.
4064
4065         * inpt-pgm.c: (end_case_trns_proc) Debugging message.
4066         (end_file_trns_proc) Debugging message.
4067
4068         * loop.c: (internal_cmd_loop) Make it work when there's no loop
4069         index!
4070         (loop_2_trns_proc) Enable MXLOOPS (why was this disabled?)
4071
4072         * main.c: (dump_token) Make kwtab[] const.
4073
4074         * set.q: Spelling, comment fixes.
4075
4076         * sysfile-info.c: (cmd_display) DISPLAY VECTORS not DISPLAY
4077         VECTOR.
4078
4079         * vars-prs.c: (fill_all_vars) Style fix.
4080
4081         * vfm.c: (index_to_varname) Return const.
4082
4083 Tue Aug  4 23:49:23 1998  Ben Pfaff  <blp@gnu.org>
4084
4085         * Changes in many source files for partial -ansi -pedantic and
4086         no-debugging compliance: Remove trailing common in enum
4087         declarations; add `unused' attributes; insert some appropriate
4088         casts.
4089
4090         * cmdline.c: (parse_command_line) Add new --testing-mode flag.
4091
4092         * command.c: (shell) Make static.
4093         (run_command) Make static.
4094
4095         * data-list.c: (dump_fixed_table) Remove use of local_strdup().
4096
4097         * dfm.c: (cmd_begin_data) I18n fix.
4098
4099         * error.c: (verbose_msg) Define if __STRICT_ANSI__.
4100
4101         * error.h: (macro verbose_msg) Define if __STRICT_ANSI__.
4102
4103         * expr-opt.c: (evaluate_tree) Don't initialize local arrays if
4104         __STRICT_ANSI__.
4105
4106         * file-handle.q: Don't prepend the source file directory name to
4107         the data file name.  (Ongoing issue.)
4108         (prepend_current_directory) Comment out.
4109         (internal_cmd_file_handle) Don't call prepend_current_directory().
4110         (fh_get_handle_by_filename) Ditto.
4111
4112         * filename.c: Append zero byte to readlink() return value.
4113
4114         * getline.c: (getl_read_line) I18n fix.
4115
4116         * lexer.h: Don't use gcc features if __STRICT_ANSI__.
4117
4118         * misc.h: Don't use gcc features if __STRICT_ANSI__.
4119
4120         * pfm-write.c: (bufwrite) Don't try to increment a void * pointer
4121         directly.
4122
4123         * postscript.c: (output_encodings) Don't use local_strdup().
4124         (postopen) Ditto.
4125
4126         * print.c: Don't use gcc features if __STRICT_ANSI__.
4127
4128         * q2c.c: (dump_vars) Don't put a , at the end of the last enum.
4129
4130         * recode.c: (parse_src_spec) Fully brace nested if's.
4131
4132         * set.q: (global var set_testing_mode) New var.
4133
4134 Wed Jul 29 22:01:44 1998  Ben Pfaff  <blp@gnu.org>
4135
4136         * ascii.c: Add some more `unused' attributes that only come into
4137         play when NDEBUG is defined.
4138         (ascii_close_page) Set s_len when reallocating s.
4139         
4140         * crosstabs.q: (delete_missing) New function.
4141         (output_pivot_table) Call delete_missing() if /MISSING=REPORT.
4142         (make_summary_table) Create summary table reallocable.
4143
4144         * postscript.c: Add more `unused' attributes as above.
4145
4146         * tab.c: (tab_create) [GLOBAL_DEBUGGING] Set reallocable member.
4147         (tab_realloc) [GLOBAL_DEBUGGING] Assert that table is reallocable.
4148          
4149         * tab.h: (struct tab_table) [GLOBAL_DEBUGGING] New `reallocable'
4150         member.
4151
4152         * var.h: (macro force_dup_variable) [!GLOBAL_DEBUGGING] Remove
4153         gratuitous space between parameter definition.
4154
4155         * vars-atr.c: Changed some assert(0)'s to abort()'s to prevent
4156         complaints about running off the end of functions with NDEBUG
4157         enabled.
4158
4159 Sun Jul  5 00:17:25 1998  Ben Pfaff  <blp@gnu.org>
4160
4161         * Several source files: Removed some PORTME notes when reflection
4162         revealed that ANSI forbids that sort of breakage.  Also, added
4163         lots of `unused' qualifiers here and there.
4164
4165         * aggregate.c: (accumulate_aggregate_info) Remove local var
4166         weighting that turned out not to be used.
4167
4168         * avl.c: Update to version 1.1.0.  Add unused specifier.
4169         (avl_destroy) Initialize ab to 0.  Comment fixes.  Cast return
4170         value to void *.
4171         (avl_probe) Replace some instances of 1 with +1 where appropriate.
4172         (avl_find) Cast return value to void *.
4173         (avl_delete) q doesn't need to be initialized at the beginning of
4174         the function.  Replace some instances of 1 with +1.
4175         (force_avl_delete) Renamed avl_force_delete, all references changed.
4176         (compare_ints) `param' marked unused.
4177         (print_int) `param' marked unused.
4178         (recurse_tree) Replace some instances of 1 with +1.
4179
4180         * avl.h: Update to version 1.1.0.  Only declares avl function
4181         types if not already declared.
4182         (AVL_MAX_HEIGHT) Only define if not already defined.
4183         (struct avl_node) New unused member char pad[2].
4184         [GLOBAL_DEBUGGING] Change conditionalization to NDEBUG instead.
4185         (force_avl_insert) Renamed avl_force_insert.
4186         (force_avl_delete) Renamed avl_force_delete.
4187
4188         * crosstabs.q: (struct table_entry) Put `freq' into a union with
4189         new member `data'.
4190         (struct crosstab) Add new member `ofs'.
4191         (glob var int_tab) Removed.
4192         (custom_tables) In integer mode, assign v[i] properly through the
4193         indirect var_dict.
4194         (custom_variables) Now p.crs.max == max + 1.
4195         [DEBUGGING] (debug_print) p.crs.min and p.crs.max are now ints.
4196         (precalc) Implement integer mode.
4197         (calc_integer) Implement integer mode.
4198         (compare_table_entry) Remove unused local variable `comparing'.
4199         (make_summary_table) Implement integer mode.
4200         (macro ns_rows) Implemented as static variable now.
4201         (several variables) Made static, from global.
4202         (output_pivot_table) Use table_value_missing() for column heads.
4203         Remove several unused local variables.  Implement integer mode
4204         table summing.  Count up ns_rows.
4205         (crosstabs_dim) Make columns wider when /MISSING=REPORT requested.
4206         (find_pivot_extent) Moved into find_pivot_extent_general; now just
4207         calls that function or find_pivot_extent_integer.
4208         (find_pivot_extent_integer) New function.
4209         (enum_var_values) Implemented for integer mode.
4210         (table_value_missing) New function.
4211         (display_dimensions) Call table_value_missing() for heads.
4212         (float_M_suffix) New function.
4213         (display_crosstabulation) Call table_value_missing() for row
4214         heads.  Handle missing values in /MISSING=REPORT mode.
4215         (calc_fisher) Remove unused var N.
4216         (calc_r) Remove unused var fact.
4217
4218         * data-list.c: (dump_fixed_table) Fix table dimensioning.
4219         (read_one_set_of_repetitions) Remove unused vars var_spec, column.
4220
4221         * data-out.c: (insert_commas) Remove unused var cp.
4222         (convert_CCx) Remove unused vars save_set_decimal,
4223         save_set_grouping.
4224
4225         * descript.q: (dump_z_table) Fix table dimensioning.
4226         (pre_calc) Remove unused var j.
4227         (display) Remove unused vars title, s.  Fix table dimensioning.
4228
4229         * expr-evl.c: Comment fixes.
4230
4231         * frequencies.q: (full_dim) New function.
4232         (dump_full) Fix table dimensioning.
4233         (condensed_dim) New function.
4234         (dump_condensed) Fix table dimensioning.
4235
4236         * get.c: (cmd_match_files) Remove unused var n_val.  Remove unused
4237         label winnage.
4238
4239         * html.c: (html_close_drive) Remove unused var i.
4240         (postopen) Remove unused vars title, curfn_len, cp.
4241         (preclose) Remove unused vars this, x.
4242
4243         * lexer.c: Comment fixes.
4244
4245         * matrix-data.c: (cmd_matrix_data) Remove unused var index.
4246
4247         * means.q: (custom_tables) Remove unused var m_dim.
4248
4249         * mis-val.c: Format fix.
4250
4251         * modify-vars.c: (cmd_modify_vars) Remove unused var new_dict.
4252
4253         * output.c: (outp_get_paper_size) Remove unused var cp.
4254
4255         * pfm-read.c: (read_float) Remove unused var save, unused label
4256         underflow.
4257         (read_variables) Remove unused vars cp, j.
4258         (read_value_label) Remove unused var j.
4259
4260         * pfm-write.c: (bufwrite) Remove unused var i.
4261
4262         * postscript.c: (ps_postopen_drive) Remove unused vars dev_info,
4263         fn.
4264         (output_encodings) Remove unused vars char_cp, n_output.
4265         (read_ps_encodings) Remove unused var ep.
4266         (postopen) Remove unused var title.
4267         (preclose) Remove unused var fp.
4268         (ps_open_page) Remove unused vars true, false, orientation,
4269         mirror_horz, mirror_vert, width, length.
4270         (ps_text_metrics) Remove unused var x.
4271
4272         * q2c.c: (find_symbol) Remove unused var y.
4273         (parse_setting) Remove unused parameter sbc, all references
4274         changed.
4275         (dump_parser) Remove unused var cp.
4276         (dump_free) Remove unused var i.
4277
4278         * set.q: (static vars args, n) Removed.
4279         (internal_cmd_gset) Removed.
4280
4281         * sfm-read.c: (sfm_read_dictionary) Removed unused var i.
4282         (read_machine_flt64_info) Removed unused var file_endian.
4283         (read_documents) Removed unused var i.
4284         (read_compressed_data) Removed unused parameter dict, all
4285         references changed.
4286
4287         * sfm-write.c: (bufwrite) Removed unused var i.
4288         (sfm_write_case) Removed unused var i.
4289
4290         * sort.c: (merge_once) Remove unused var t.
4291         (write_separate) #if 0 out as dead code.
4292
4293         * split-file.c: (cmd_split_file) Remove unused var i.
4294
4295         * sysfile-info.c: (sysfile_info_dim) New function.
4296         (cmd_sysfile_info) Fix table dimensioning.
4297         (variables_dim) New function.
4298         (display_variables) Fix table dimensioning.
4299         (describe_variable) Remove unused var prev_r.
4300
4301         * t-test.q: (z_postcalc) Removed.
4302         (pairs_calc) Remove unused var bad_weight.
4303         (postcalc) Remove unused vars dfn, dfd.
4304
4305         * tab.c: (tab_create) Set t->dim to NULL.
4306         (tab_dim) Make sure t->dim is NULL first.
4307         (tab_natural_width) Remove parameter `clamp'.
4308         (tab_value) Remove duplicate assertion for table.
4309         (tab_raw) New function.
4310         (nowrap_dim) New function.
4311         (wrap_dim) New function.
4312         (tab_output_text) Fix table dimensioning.
4313
4314         * tab.h: (tab_raw) New macro.
4315
4316         * val-labs.c: (get_label) Remove unused var type.
4317         (copy_value_labels) Remove unused var trav.
4318
4319         * var.h: (struct crosstab_proc) Completely changed.
4320
4321         * vars-prs.c: (parse_dict_variable) Remove unused var v.
4322
4323         * vfm.c: (open_active_file) Remove unused vars i, lp.
4324
4325         * weight.c: (weight_trns_proc) #if 0 out as dead code.
4326         
4327 Tue Jun  2 23:37:21 1998  Ben Pfaff  <blp@gnu.org>
4328
4329         * Makefile.am: Add apply-dict.c, flip.c.
4330
4331         * apply-dict.c: New file.
4332         
4333         * command.c: (struct command) Make cmd[] larger for CLEAR
4334         TRANSFORMATIONS command name.
4335         (parse_cmd) Make sure we're in a valid state before using it as an
4336         index.  Discard variables and reset state on invalid transitions.
4337         (cmd_clear_transformations) New function.
4338
4339         * command.def: Add APPLY DICTIONARY, CLEAR TRANSFORMATIONS, FLIP.
4340         Add unimplemented PRESERVE, RESTORE.
4341
4342         * file-handle.h: Include stddef.h.
4343
4344         * flip.c: New file.
4345         
4346         * pfm-read.c: (parse_value) Pad value label values with spaces,
4347         not nulls.
4348
4349         * sfm-read.c: (struct sfm_fhuser_ext) Add reference count.
4350         (sfm_close) Decrement reference count, make sure it's zero.
4351         (sfm_maybe_close) New function.
4352         (sfm_read_dictionary) Handle reference counts.
4353
4354         * vars-atr.c: (clear_default_dict) New function.
4355         (discard_variables) Use clear_default_dict().
4356
4357 Sun May 31 00:58:05 1998  Ben Pfaff  <blp@gnu.org>
4358
4359         * Makefile.am: Add pfm-write.c.
4360         (LDADD) Add the libgmp2 libraries.
4361
4362         * command.def: Define EXPORT.
4363
4364         * get.c: (cmd_export) New function.
4365         (export_write_case_func) New function.
4366
4367         * pfm-read.c: (static spss2ascii[]) Make it const.
4368
4369         * pfm-write.c: New file.
4370
4371         * sfm-write.c: Formatting, comment fixes.
4372
4373         * var.h: Comment fix.
4374
4375 Fri May 29 21:44:12 1998  Ben Pfaff  <blp@gnu.org>
4376
4377         * Makefile.am: Add pfm.h, pfm-read.c.
4378
4379         * command.def: IMPORT is now implemented.
4380
4381         * format.c: (glob var translate_fmt[]) New var.
4382
4383         * get.c: (enum GTSV_NONE) Renamed GTSV_OPT_NONE.
4384         (cmd_import) New function.
4385         (import_source_read) New function.
4386         (glob var import_source) New var.
4387
4388         * pfm-read.c: New file.
4389
4390         * pfm.h: New file.
4391         
4392         * sfm-read.c: (parse_format_spec) Local variable translate_fmt[]
4393         moved in format.c.
4394         (dump_dictionary) Disabled printing a couple of items.
4395
4396 Mon May 25 12:42:37 1998  Ben Pfaff  <blp@gnu.org>
4397
4398         * crosstabs.q: (postcalc) Call make_summary_table().
4399         (make_summary_table) New function.
4400         (insert_summary) New function.
4401         (display_dimensions) Remove some unnecessary arguments, all
4402         references changed.
4403         (output_pivot_table) Fix lots of problems with the risk table
4404         setup.
4405         (submit) Don't display an empty table.
4406         (display_risk) Fix order of arguments to calc_risk().
4407
4408         * glob.c: Always include assert.h and stdlib.h.
4409
4410         * output.h: (enum OUTP_T_JUST_FULL) Removed, all references
4411         removed.
4412
4413         * tab.c: (tab_create) Cosmetic changes.
4414
4415         * tab.h: (enum TAB_JUSTIFY) Removed, all references removed.
4416
4417 Sun May 24 22:39:23 1998  Ben Pfaff  <blp@gnu.org>
4418
4419         * tab.def: Removed.
4420
4421         * crosstabs.q: (output_pivot_table) Headers drawing and submission
4422         code simplified, moved into new function submit().
4423         (submit) New function.
4424         (crosstabs_dim) New function.
4425         (display_directional) Substitute variable names for %s where
4426         appropriate.
4427         (somers_d_v[], somers_d_ase[], somers_d_t[]) New static vars.
4428         (calc_symmetric) Initialize parameters only if non-NULL.
4429         Calculate Somers' d.
4430         (calc_directional) Calculate Somers' d (or copy it, really).
4431         Calculate eta.
4432
4433         * output.c: (outp_string_width) New function.
4434
4435         * postscript.c: (postopen) Calculate font widths based on the
4436         width of the zero '0' character, not the width of the space
4437         character.  Set paper-width and paper-length based on points, not
4438         device units.
4439         (ps_open_page) Fix page setup string for landscape mode.
4440
4441         * som.h: (struct som_dimension) Removed.
4442         (struct som_table_class) height, width members take int * not
4443         som_dimesion * now.
4444
4445         * tab.c: Many functions now have added parameter validation.
4446         (tab_height, tab_width) These functions were removed and merged
4447         into a single function tab_resize(), and all references changed.
4448         (tab_dim) Rewritten since the interface changed; reduced from
4449         hundreds of lines to two.  All callers were changed.  Currently
4450         most of them just use tab_natural_dimensions as their callback and
4451         await detailed translation of functionality.
4452         (tab_natural_width) New function.
4453         (tab_natural_height) New function.
4454         (tab_natural_dimensions) New function.  This is a callback
4455         function, not something that you'd want to call directly.
4456         (tab_nat_dim) Removed.
4457         (tabi_table) Allocates t->w and t->h.
4458         (tabi_driver) Inlined sum_columns()'s functionality.  Calls the
4459         dimensions callback.
4460         (evaluate_dimensions) Removed.
4461         (sum_columns) Removed.
4462
4463         * tab.h: (enum TAL_1THIN) Removed.
4464         (enum series t_*) Removed.
4465         (struct tab_table) Members trh, trv changed to unsigned char *
4466         from int *.  Member dim changed to a function pointer from a
4467         unsigned char *.  Member max_stack_height removed.  New members
4468         hr_tot, vr_tot.
4469         (macros tab_l, tab_r, tab_t, tab_b) New.
4470
4471 Sat May 23 23:22:13 1998  Ben Pfaff  <blp@gnu.org>
4472
4473         * ascii.c: (delineate) Assign last_space_nchars before skipping
4474         spaces, to fix right justification.
4475
4476         * crosstabs.q: (static vars risk, direct) New vars.
4477         (static var pearson_r) Removed.
4478         (glob var chisq_fisher) Made static.
4479         (static vars row_tot[], col_tot[]) Don't include grand total
4480         anymore.
4481         (static var grand_total) Renamed W, all references changed.
4482         (output_pivot_table) Only make `table' if num_cells != 0.  Make
4483         risk and directional tables.  Deal with grand total no longer part
4484         of col_tot[].  Free rows and cols after we're done with them.
4485         (display_risk) New function.
4486         (display_directional) New function.
4487         (clac_r) Rewritten so that it stores all its results into its
4488         arguments, so it can be used for Spearman's correlation too.
4489         (calc_symmetric) Added a t[] argument, all references changed.
4490         Calculates ASEs for tau-b, tau-c, gamma.  Calculates Spearman's r,
4491         Pearson's r, Cohen's kappa.
4492         (calc_risk) New function.
4493         (calc_directional) New function.
4494
4495         * som.c: (som_submit) Improved debugging code.
4496
4497         * stats.c: (hypercube) New function.
4498         (cube) New function.
4499         (sqr) New function.
4500         (normal_sig) Went back to old implementation, which actually
4501         worked.
4502
4503         * stats.h: (macros square, cube, hypercube) Removed.  The
4504         equivalent functions in stats.c are inlined here; all references
4505         to square changed to sqr.
4506
4507 Fri May 22 00:03:41 1998  Ben Pfaff  <blp@gnu.org>
4508
4509         * crosstabs.q: (N_SYMMETRIC) New define.
4510         (postcalc) Disable debug printing.
4511         (static vars chisq_fisher, pearson_r) New.
4512         (output_pivot_table) Add support for symmetric measures.  Add
4513         chi-square output of exact sigs.
4514         (display_chisq) Rewritten.
4515         (display_symmetric) New function.
4516         (gamma_int) New function.
4517         (Pr) New function.
4518         (swap) New function.
4519         (calc_fisher) New function.
4520         (calc_chisq) Check boundary conditions better. Calculate Yates,
4521         Fisher, Mantel-Haenszel tests.
4522         (calc_r) New function.
4523         (calc_symmetric) New function.
4524
4525         * stats.c: (normal_sig) Rewritten with new algorithm.  Renamed
4526         from calc_normal.
4527         (chisq_sig) Better boundary conditions.  Renamed from
4528         calc_significance.
4529
4530         * tab.h: (struct tab_table) New member cf.
4531
4532         * tab.c: (tab_create) Set cf.
4533         (tab_width) New function.
4534         (tab_realloc) Handle cf.
4535         (tab_vline) Handle cf.
4536         (tab_hline) Handle cf.
4537         (tab_box) Handle cf.
4538         (tab_value) Handle cf.
4539         (tab_float) Handle cf.
4540         (tab_text) Handle cf.
4541         (tab_joint_text) Handle cf.
4542         (tab_offset) Handle cf.
4543         (tab_next_row) Handle cf.
4544         (evaluate_dimensions) Handle cf.
4545         (render_strip) Handle cf.
4546
4547 Wed May 20 00:03:59 1998  Ben Pfaff  <blp@gnu.org>
4548
4549         * crosstabs.q: (postcalc) New vars row_tot, col_tot, pass them to
4550         output_pivot_table().
4551         (output_pivot_table) Moved lots of local variables outside and
4552         made them static.  Add beginnings of chi-square statistic
4553         support.  Now column and row totals aren't in the main matrix.
4554         Always zero out any leftover rows & columns after we're done with
4555         the table entries.  Move all output stuff into
4556         display_dimensions(), display_crosstabs(), display_chisq().
4557         (display_dimensions) New function.
4558         (display_crosstabulation) New function.
4559         (display_chisq) New function.
4560         (calc_chisq) Implemented Pearson and likelihood-ratio chisquares.
4561
4562         * frequencies.q: (dump_full, dump_condensed) Remove tab_null()
4563         references, simplify logic.
4564
4565         * postscript.c: Remove scale, translate-x, translate-y,
4566         mirror-horz, mirror-vert, rotate-180 options.
4567         (struct ps_driver_ext) Remove scale, translate_x, translate_y.
4568         All references deleted.
4569         (macro YT) New macro.
4570         (array option_tab[]) Removed options.
4571         (ps_option) Removed options.
4572         (ps_open_page) Write page setup explicitly to output file, without
4573         using now-deleted BP function.
4574         (macro dump_line) Use YT().
4575         (macro dump_thick_line) Use YT().
4576         (draw_headers) Use YT().
4577         (switch_font) Reorder arguments to SF function.
4578         (write_text) Use YT().
4579
4580         * sfm-read.c: (sfm_read_case) Don't attempt to read variables that
4581         have get.fv == -1.
4582
4583         * sysfile-info.c: (describe_variables) Don't use tab_nulls().
4584
4585         * tab.c: (tab_create) Initialize t->ct to zeros.  Remove
4586         null-debugging code.
4587         (tab_realloc) Remove null-debugging code.  Initialize new regions
4588         of t->ct to zeros.
4589         (tab_vline) Support offsets.
4590         (tab_hline) Support offsets.
4591         (tab_box) Support offsets.
4592         (tab_null) Removed.
4593         (tab_nulls) Removed.
4594         (tab_row) Removed.
4595         (tab_col) Removed.
4596         (evaluate_dimensions) Remove null-debugging code.  Understand
4597         TAB_EMPTY attribute.  Assert that text.s.s is always non-NULL if
4598         TAB_EMPTY not present.
4599
4600         * tab.h: New cell attribute TAB_EMPTY.
4601         (macros tab_nr, tab_nc, tab_row, tab_col) New.
4602
4603         * vars-atr.c: (init_variable) Set get.fv to -1 so that GET doesn't
4604         try to read them from system files.
4605
4606         * vfm.c: (dump_splits) Don't call tab_null().   
4607
4608 Sat May 16 19:36:55 1998  Ben Pfaff  <blp@gnu.org>
4609
4610         * crosstabs.q: (struct crosstab) Added `missing' member.
4611         (custom_tables) Init missing.
4612         (calc_general) Handle missing values.
4613         (calc_chisq) New function.
4614         (output_pivot_table) Start work on chi-square output.  Update for
4615         new tab offset support functions.  Shorten statistic names.
4616
4617         * Several files: add in more `const's to placate gcc's warnings.
4618
4619         * tab.h: (struct tab_table) Add col_ofs, row_ofs members.  Comment
4620         fixes.
4621
4622         * tab.c: (tab_height, tab_realloc, tab_vline, tab_hline, tab_box,
4623         tab_null, tab_nulls, tab_value, tab_float, tab_text,
4624         tab_joint_text) Add col_ofs and row_ofs support.
4625         (tab_offset) New function.
4626         (tab_next_row) New function.
4627         (tab_row) New function.
4628         (tab_col) New function.
4629         (tabi_table) Add col_ofs and row_ofs support.
4630
4631         * vars-atr.c: (is_system_missing) New function.
4632
4633 Tue May 12 16:14:30 1998  Ben Pfaff  <blp@gnu.org>
4634
4635         * crosstabs.q: Expanded subcommand names RESID --> RESIDUAL, etc.
4636         (static var no_cells) Removed.
4637         (static var num_cells) New.
4638         (static var expected) New.
4639         (static var cells[]) New.
4640         (internal_cmd_crosstabs) Deal with new variables.
4641         (postcalc) Removed most of the meat and put it in new function
4642         output_pivot_table().
4643         (output_pivot_table) Calculates and outputs an entire pivot table.
4644
4645         * postscript.c: (postopen) Fix problems with free()ing addresses
4646         not obtained from malloc().
4647
4648         * som.c: (som_submit) Add assertion.
4649
4650         * sysfile-info.c: (describe_variable) Use new tab_nulls()
4651         function.
4652
4653         * tab.c: (static var tab_names[]) New.
4654         (tab_realloc) -1 for nc or nr indicates no change.
4655         (tab_nulls) New function.
4656         (tab_dim) Use tab_names[].
4657         (tabi_cumulate) Don't include bottom or right headers.  Furrfu.
4658         (evaluate_dimensions) Don't terminate on uninited cells, just put
4659         an X in them and emit a notice.  Use tab_names[].
4660
4661         * tab.h: Move bits into tab.def.
4662
4663         * tab.def: New.  Don't try to declare tab_table_class because then
4664         som.h has to be included.       
4665         
4666 Thu May  7 22:55:04 1998  Ben Pfaff  <blp@gnu.org>
4667
4668         * command.def: New file, contains all the command definitions
4669         previously included bodily in command.c.
4670
4671         * format.def: New file, contains all of the format definitions
4672         previously split across format.h, format.c, and sfm-write.c.
4673
4674         * lexer.h: Renamed from tokens.h in order to match corresponding
4675         .c file name.
4676
4677         * lexerP.h: Moved some rarely used functions exported by lexer.c
4678         into here.
4679
4680         * Makefile.am: Commemorate renamed files.
4681         (EXTRA_DIST) Add command.def, format.def.
4682
4683         * command.c: [0] (walk_cmdtable_func) Removed.
4684
4685         * crosstabs.q: (postcalc) Made it work and print out matrices
4686         proving it.
4687         (enum_column_values) Renamed enum_var_values, generalized for any
4688         variable.
4689
4690         * format.h: (struct fmt_desc) New member `spss'.
4691
4692         * q2c.c: (main) Generated code includes lexer.h instead of
4693         tokens.h.
4694
4695         * sfm-write.c: (write_format_spec) Use new spss member of fmt_spec
4696         instead of an independent translation table.
4697
4698 Tue May  5 13:19:03 1998  Ben Pfaff  <blp@gnu.org>
4699
4700         * Lots of source files: Added const to declarations.
4701
4702         * aggregate.c: (parse_aggregate_function) Rename inner i to j.
4703         
4704         * arena.c: (arena_clear) Set prev pointer to null when done.
4705
4706         * ascii.c: (ascii_option) Rename index as indx.
4707
4708         * avl.c: This is now a separate library called libavl.
4709         (xmalloc) Make static.
4710         (avl_probe) Step A7 can use the cache instead of an explicit
4711         compare.
4712         (avl_delete) Don't maintain a q pointer because it's always
4713         available in the pointer stack.  Comment fix.
4714
4715         * avl.h: This is now a separate library called libavl.
4716
4717         * command.c: (cmd_table[]) Remove spurious trailing "".
4718
4719         * common.h: Only include random() fix if this system needs it.
4720
4721         * crosstabs.q: Include alloca headers.
4722         (n_sorted_tab) New global var.
4723         (postcalc) Mostly rewritten.
4724         (find_pivot_extent) Rewritten.
4725         (enum_column_values) Rewritten.
4726
4727         * data-out.c: (convert_F) Rename inner n as n_spaces.
4728
4729         * error.c: (dump_message) Don't have an outer var i.
4730
4731         * file-handle.q: (static var f) Removed.  All references removed.
4732         (internal_cmd_file_handle) Uses a local variable instead of f.
4733
4734         * get.c: (trim_dictionary) Change scope of i, i1, i2.
4735         (cmd_match_files) Don't strcpy tokstr into sbc (why was this ever
4736         done?)
4737
4738         * getline.h: Declare getl_history as extern.  Reported by
4739         palme@uni-wuppertal.de (Hubert Palme).
4740
4741         * postscript.c: (postopen) Some large mods for constness.
4742
4743         * recode.c: Remove spurious copyrights since PSPP is owned by FSF
4744         anyway.
4745
4746 Fri Apr 24 12:52:47 1998  Ben Pfaff  <blp@gnu.org>
4747
4748         * Makefile.am: Rename BUILT_SOURCES to q_sources, all references
4749         changed.  Add avl.c, avl.h to pspp_SOURCES.  Remove avllib from
4750         LDADD.
4751
4752         * avl.c, avl.h: New files.  These form a clean-room
4753         reimplementation of avllib.  Iterative algorithms are used in
4754         place of recursive ones, so there is no resemblance in the code.
4755
4756         * Lots of headers: Don't include other headers by default.
4757
4758         * Lots of source files: Explicitly include all needed headers.
4759
4760         * arena.c: (arena_clear) New function.
4761
4762         * crosstabs.q: (ROW_VAR, COL_VAR) New enums.
4763         (static var ar) Removed.
4764         (staitc vars ar_tc, ar_col) New.
4765         (cmd_crosstabs) Destroy the arenas.
4766         (internal_cmd_crosstabs) Create the arenas.
4767         (precalc) Don't need a free function for the hash.
4768         (calc_general) Make sure to zero out the trailer on the key data
4769         before inserting.
4770         (print_table_entries) Updated.
4771         (postcalc) Worked on actually implementing.
4772         (find_pivot_extent) New function.
4773         (compare_value) New function.
4774         (enum_column_values) New function.
4775
4776         * data-in.c: (parse_month) Make local array `static const'.
4777         
4778         * data-out.c: (convert_date) Make local array `static const'.
4779         (convert_WKDAY) Same.
4780         (convert_MONTH) Same.
4781
4782         * frequencies.q: (postprocess_freq_tab) avl_walk_inorder() has
4783         been renamed to avl_walk().
4784         
4785         * hash.c: Rewritten more efficiently.
4786
4787         * hash.h: Add attribute const to hsh_next_prime declaration.
4788
4789         * lexer.c: (id_match) Make arguments const.
4790
4791         * postscript.c: (ps_postopen_driver) Make default fonts the
4792         Helvetica family.
4793
4794         * q2c.c: (main) Generated code needs stdlib.h.
4795
4796         * sfm-write.c: (write_value_labels) An avl_traverser needs to be
4797         initialized to 0 now, not to NULL.  All other references to
4798         avl_traverser were updated in the same way.
4799
4800         * tokens.h: Macro version of id_match updated to use const
4801         properly.
4802
4803         * val-labs.c: (inc_ref_count) New function.
4804         (copy_value_labels) Simply through use of new avl_copy() function.
4805
4806 Wed Apr 15 13:01:58 1998  Ben Pfaff  <blp@gnu.org>
4807
4808         * crosstabs.q: Probably doesn't compile.  New PIVOT subcommand.
4809         (postcalc) Worked on this.
4810
4811         * postscript.c: (OPO_DOUBLE_LINE) New enum.
4812         (struct ps_driver_ext) New line_width_thick member.
4813         (ps_preopen_drive) Init line_width_thick.
4814         (option_tab[]) Add line-* options.
4815         (ps_option) Parse line-* options.
4816         (postopen) Add line_width_thick support.  Strip leading spaces on
4817         prologue output lines.
4818         (ps_open_page) Include line_width_thick in output.
4819         (macro dump_thick_line) New.
4820         (dump_fancy_line) Support thick lines as well as double lines.
4821
4822 Tue Apr 14 00:50:08 1998  Ben Pfaff  <blp@gnu.org>
4823
4824         * Makefile.am: Add crosstabs.c to BUILT_SOURCES.  Add crosstabs.q
4825         to pspp_SOURCES.  Add crosstabs.q to EXTRA_DIST.
4826
4827         * Many source files: Rename `options' to `pv_opts' as appropriate.
4828
4829         * command.c: (static var cmd_table[]) Add CROSSTABS command.
4830
4831         * common.c: (xcalloc) New function.
4832
4833         * crosstabs.q: New file.  Not finished yet, though.
4834                 
4835         * data-list.c: Comment fix.
4836
4837         * error.c: Remove some old Checker cruft.
4838
4839         * frequencies.q: (dump_full) Cumulate valid percent instead of
4840         regular percent.
4841
4842         * getline.c: Comment fix.
4843
4844         * hash.c: Comment fixes.
4845
4846         * hash.h: (struct hsh_table) Make hash functions return unsigned
4847         instead of int to avoid problems with taking the modulo of
4848         negative return values.  All references changed.
4849
4850         * misc.c: (intlog10) Make its table static const instead of auto.
4851
4852         * sfm-read.c: (read_header) Make `prefix' static const instead of
4853         auto.
4854
4855         * var.h: (union value) Add member `hash'.
4856         (struct variable) Rename prv_index as `foo'--all references
4857         changed.  Reorder.
4858         (typedef pv_opts) Removed.  All references changed.
4859
4860         * vars-prs.c: (parse_variables) Message fixes.
4861         
4862 Mon Mar  9 15:35:08 1998  Ben Pfaff  <blp@gnu.org>
4863
4864         * get.c: (cmd_match_files) Don't reverse the order of FILEs as
4865         they are being inserted.  Don't check for BY variables of
4866         different types.  Discard variables if the active file isn't
4867         included in the merge.
4868         (mtf_processing) Essentially rewritten.
4869         (mtf_merge_dictionary) Check for master/slave variables of
4870         different types/widths.
4871
4872         * vfm.c: (static var not_canceled) New var.
4873         (process_active_file) Don't call vfm_source->read() if
4874         there's no vfm-source.  Initialize not_canceled.
4875         (process_active_file_write_case) Honor and update not_canceled.
4876         (prepare_for_writing) Rollback changes from yesterday, they were
4877         wrong.
4878         (close_active_file) Don't destroy vfm_source unless it exists.
4879         
4880 Mon Mar  9 00:56:16 1998  Ben Pfaff  <blp@gnu.org>
4881
4882         * Lots of source files: Added { } around nested if/else constructs
4883         to avoid new gcc 2.8 warnings.
4884
4885         * data-in.c: (parse_Z) Declare `int' type explicitly.
4886         (convert_Z) Ditto.
4887
4888         * get.c: (struct mtf_file) Add prev, next_min, by, input members.
4889         (cmd_match_files) Initialize mtf_by_values.  Manage by, input,
4890         prev members.  Put TABLEs at the end of the chain and FILEs at the
4891         beginning.  Don't allow the active file in STATE_INIT.  Use proper
4892         `seen' value for the active file.  Fill out the by members and
4893         make sure they're of consistent type.  Do the actual merge
4894         operation.
4895         (mtf_processing_finish) New function.
4896         (var_type_description) New function.
4897         (mtf_free_file) New function.
4898         (mtf_free) Rewritten.
4899         (mtf_delete_file_in_place) New function.
4900         (mtf_read_nonactive_records) New function.
4901         (mtf_compare_BY_values) New function.
4902         (static var mtf_seq_no) New var.
4903         (mtf_processing) New function.
4904         (mtf_merge_dictionary) Assign nval members for the system file
4905         dictionary.  Assign fv values for its variables.  Point each slave
4906         variable to the corresponding master variable.
4907
4908         * hash.c: Include str.h.
4909
4910         * mis-val.c: (copy_missing_values) src arg is const.
4911
4912         * misc.c: (spacing) Make `max' var explicitly int.
4913
4914         * sfm-read.c: (dump_dictionary) Message reformatting.
4915         (sfm_read_case) Add assertion.
4916
4917         * sort.c: Esthetic fixes.
4918
4919         * var.h: (struct match_files_proc) New struct.
4920         (struct variable) Add private data match_files_proc.
4921
4922         * vars-atr.c: (delete_variable) Implement.  Add argument for the
4923         dictionary that owning the variable.
4924         (dup_variable) Add assertion.
4925
4926         * vfm.c: Comment fixes, hopefully the comments are correct now.
4927         (process_active_file) New function.
4928         (process_active_file_write_case) New function.
4929         (process_active_file_output_case) New function.
4930         (prepare_for_writing) Use temp_dict->nval for vfm_info, not
4931         default_dict.nval.
4932         (write_case) Renamed procedure_write_case().  Now write_case is a
4933         pointer to a function.  Style fixes.
4934         
4935 1998-03-05  Ben Pfaff  <blp@gnu.org>
4936
4937         * Makefile.am: (q2c) Link with libmisc.
4938         (version.c) Define default_config_path, include_path,
4939         groff_font_path.
4940
4941         * ascii.c: (ascii_postopen_driver) When the default newline string
4942         is requested, open file in text mode.  Suggested by
4943         palme@uni-wuppertal.de (Hubert Palme).
4944         (static vars line_buf, line_p) Change from char * to unsigned char
4945         *.
4946         (ascii_close_page) char * to unsigned char *.
4947
4948         * cmdline.c: (parse_command_line) Implement -r option by
4949         prepending ~/.pspp/rc to the list of files to process.
4950
4951         * command.c: (cmd_remark) Reset getl_prompt to the standard prompt
4952         before pulling in a final line.
4953         (null_func, null_int_func) Removed (dead code).
4954
4955         * descript.q: (display) Calculate width of variable name column
4956         properly.  Calculate number of valid cases properly.  Reported by
4957         palme@uni-wuppertal.de (Hubert Palme).
4958
4959         * filename.c: (init_filename) Use default_config_path instead of
4960         now obsolete CONFIG_PATH.
4961
4962         * getline.c: (getl_initialize) Use include_path instead of now
4963         obsolete INCLUDE_PATH.
4964         (getl_add_file) New argument `where'.  All references changed.
4965
4966         * groff.c: (find_font_file) Use groff_font_path instead of now
4967         obsolete GROFF_FONT_PATH.
4968         
4969         * postscript.c: (find_ps_file) Use groff_font_path instead of now
4970         obsolete GROFF_FONT_PATH.  Copy through temporary variable to
4971         avoid problems with constness.
4972
4973         * str.h: (macro cs_streq) New macro.
4974
4975         * version.h: (glob var default_config_path, include_path,
4976         groff_font_path) New vars.
4977         
4978 1998-02-23  Ben Pfaff  <blp@gnu.org>
4979
4980         * Many source files: Change verbose_msg() priority levels and
4981         messages.
4982
4983         * aggregate.c: Include debug-print.h.
4984
4985         * cmdline.c: (parse_command_line) Add --safer/-s and --command/-c
4986         options.
4987         (static var pre_syntax_message) Document --safer/-s and
4988         --command/-c.
4989
4990         * command.c: (cmd_erase, cmd_host) Disable if set_safer is set.
4991
4992         * dfm.c: (open_inline_file) [__CHECKER__] Zero out ext->file,
4993         because it's not used but it's still copied.
4994         (open_file_r) Remove gratuitous debug message.
4995
4996         * filename.c: (safety_violation) New function.
4997         (open_file) Remove gratuitous debug messages.  Don't allow pipe
4998         files if set_safer is set.
4999
5000         * get.c: Turn off debugging.
5001
5002         * getline.c: (getl_add_virtual_file) New function.
5003         (getl_read_line) Add verbose_msg() call for opening new syntax
5004         file.
5005         (getl_perform_delayed_reset) Add a return value describing whether
5006         any action was taken.  Call reset_eof().
5007
5008         * getline.h: Comment fix.
5009
5010         * groff-font.c: (groff_read_font) Use `goto next_iteration' in
5011         place of incorrect `continue'.  Use strtok_r() instead of
5012         strtok().  Always check strtok_r() return value.
5013         (groff_read_DESC) Use strtok_r() instead of strtok().
5014
5015         * lexer.c: (reset_eof) New function.
5016
5017         * main.c: (parse) Get a token after performing a delayed reset
5018         action; allow empty syntax files.
5019
5020         * postscript.c: (output_encodings) Use strtok_r() instead of
5021         strtok().
5022
5023         * q2c.c: (dump_parser) Use strtok_r() instead of strtok().
5024
5025         * set.q: Comment fixes.
5026         (glob var set_safer) New var.
5027         (internal_cmd_set) Support SAFER.
5028
5029         * str.h: [!HAVE_STRTOK_R] Declare strtok_r() prototype.
5030
5031         * temporary.c: (free_dictionary) Set d->splits to NULL after
5032         freeing.
5033
5034         * vars-atr.c: (clear_variable) Decrement dict->n_splits if
5035         variable deleted, not if it *isn't* deleted.
5036
5037 1998-02-16  Ben Pfaff  <blp@gnu.org>
5038
5039         * command.c: (array cmd_table[]) Add MATCH FILES.
5040
5041         * common.c: Comment fixes.
5042
5043         * data-list.c, dfm.c, error.c, filename.c, list.q, matrix-data.c,
5044         modify-vars.c, postscript.c, sfm-read.c, sfm-write.c, tab.c:
5045         Include alloca.h.  Problem reported by palme@uni-wuppertal.de
5046         (Hubert Palme).
5047
5048         * expr-opt.c: Include str.h.  Problem reported by
5049         palme@uni-wuppertal.de (Hubert Palme).
5050
5051         * get.c: (cmd_get) [DEBUGGING] Update v->p.get to v->get.
5052         (static var mtf_by) Change from char ** to variable **.
5053         (static var mtf_master) New var.
5054         (mtf_merge_dictionary) New function.
5055         (cmd_match_files) Init mtf_master.  Parse mtf_by according to new
5056         var type.  Reorder tests properly.  Initialize file->dict.  Detect
5057         TABLE= without BY=.  Read file dictionaries and merge them.  Give
5058         subcommand name with IN, LAST, FIRST error messages.  Create IN,
5059         LAST, FIRST variables.  Comment fixes.
5060         (mtf_free) Don't free default_dict.  Free mtf_master.
5061
5062         * getline.c: Define getl_mode.  Change getl_buf_size to size_t
5063         from int.
5064         (handle_line_buffer) Cast int to size_t in comparison to avoid
5065         warning.
5066
5067         * getline.h: Declare getl_mode extern.
5068
5069         * groff-font.c: (groff_read_font) Type-fix calls to getline.
5070         (groff_read_DESC) Make line_size a size_t.
5071         (match_tok) Parenthesize name to avoid macro expansion.
5072
5073         * mis-val.c: (copy_missing_values) New function.
5074
5075         * postscript.c: (postopen) Make buf_size a size_t.
5076
5077         * sfm-read.c: (dump_dictionary) Make global from static.  Print
5078         variable info in parts for easier debugging with Checker.
5079
5080         * temporary.c: (copy_variable) Use copy_value_labels().
5081         (new_dictionary) New arg: whether to copy file label, documents.
5082
5083         * val-labs.c: (copy_value_labels) New function.
5084
5085         * var.h: (enums MISSING_*) Add MISSING_COUNT.
5086
5087         * vars-atr.c: [GLOBAL_DEBUGGING] (force_dup_variable) New
5088         function.
5089         (dup_variable) Set prv_index, get.fv, get.nv.
5090
5091 Fri Feb 13 15:38:36 1998  Ben Pfaff  <blp@gnu.org>
5092
5093         * Makefile.am: (pspp_SOURCE) Add htmlP.h.
5094
5095         * Many source files: For ANSI-compliance, add empty statement
5096         after label.  Reported by palme@uni-wuppertal.de (Hubert Palme)
5097         and Micah Altman <maltman@www-vdc.fas.harvard.edu>.
5098
5099         * data-in.c: (parse_numeric) Some header files break on
5100         -DBL_MIN_10_EXP because they get a --; add () for safety.
5101         Reported by palme@uni-wuppertal.de (Hubert Palme).
5102
5103         * dfm.c: Idea by Dr Eberhard W Lisse <el@linux.lisse.na>.
5104         (struct dfm_fhuser_ext) Change `file' from FILE * to file_ext.
5105         (dfm_close) Use close_file_ext.
5106         (open_inline_file) Set file.file to NULL, not file.
5107         (open_file_r, open_file_w) Initialize file.file; fill in file_ext
5108         struct and use open_file_ext().
5109         (read_record) Use file.file.
5110
5111         * file-handle.q: (prepend_current_directory) Pass through special
5112         filenames.
5113
5114         * filename.c: Only include unistd.h if HAVE_UNISTD_H.
5115         (normalize_filename) Pass through special filenames.
5116         (open_file, close_file) Accept pipe| and |pipe syntaxes as
5117         equivalent.
5118         (dirname) Rename blp_dirname() because of name conflict on some
5119         OS.  All references changed.  Reported by palme@uni-wuppertal.de
5120         (Hubert Palme).
5121         (is_special_filename) New function.
5122
5123         * get.c: (GTSV_OPT*) Add GTSV_OPT_MATCH_FILES.
5124         (trim_dictionary) Conditionalize some of the options on whether
5125         GTSV_OPT_MATCH_FILES is in *options.
5126         (rename_variables) Don't allow variables to be renamed as scratch
5127         variables.
5128         (MTF_*) New enum series.
5129         (struct mtf_file) New struct.
5130         (static vars mtf_head, mtf_tail, mtf_by, mtf_n_by, mtf_free) New
5131         vars.
5132         (cmd_match_files, mtf_free) New functions.
5133
5134         * lexer.c: (match_int) Needed parentheses around name to escape
5135         macro expansion.  Reported by Micah Altman
5136         <maltman@www-vdc.fas.harvard.edu>.
5137
5138         * print.c: Needed to include alloca.h.  Reported by Micah Altman
5139         <maltman@www-vdc.fas.harvard.edu>.
5140
5141         * recode.c: (convert_to_double) Parenthesize -DBL_MIN_10_EXP to
5142         -(DBL_MIN_10_EXP).  Reported by palme@uni-wuppertal.de (Hubert
5143         Palme).
5144         
5145         * str.h: Include stdarg.h.  Reported by palme@uni-wuppertal.de
5146         (Hubert Palme) and Micah Altman <maltman@www-vdc.fas.harvard.edu>.
5147
5148 Thu Feb  5 00:18:21 1998  Ben Pfaff  <blp@gnu.org>
5149
5150         * html.c: (struct html_driver_ext) Move into htmlP.h.
5151         (html_preopen_driver) Initialize cp_x, cp_y.
5152         (html_submit) Implement as call to output_tab_table().
5153         (change_attributes) New function.
5154         (escape_string) New function.
5155         (output_tab_table) New function.
5156
5157         * list.q: (write_all_headers) Add code for writing headers for the
5158         html driver.
5159         (clean_up) Write out the html close-table tag.
5160         (determine_layout) Ignore html driver.
5161         (list_cases) Write html data.
5162
5163         * som.c: (som_submit) Move more of the code into output_table().
5164
5165         * tab.c: (static var hit) Make a global var and rename tab_hit.
5166         (static var tab_table_class) Make a global var.
5167
5168         * htmlP.h: New file.
5169
5170 Tue Feb  3 16:12:18 1998  Ben Pfaff  <blp@gnu.org>
5171
5172         * dump-sysfile.c: Removed.
5173
5174         * html.c: (preclose) Change comment in emitted code.
5175
5176         * matrix-data.c: Debugging off by default.  Comment fixes.
5177         (static var container) New var.
5178         (cmd_matrix_data) Create and destroy container.  Initialize
5179         is_per_factor[] to 0s.  Move code into new function
5180         string_to_content_type().  Require split values to be present in
5181         the data when ROWTYPE_ is explicit.  Call specific function, not
5182         general read_matrices().
5183         (string_to_content_type) New function.
5184         (context) Exclude all whitespace, not just spaces.
5185         (mget_token) A dot is a number.  Add assertion.
5186         (static var data) Renamed nr_data.
5187         (static var factor_values) Renamed nr_factor_values.
5188         (read_matrices) Renamed read_matrices_without_rowtype().  Handle
5189         only specific case.  Close data_file before exit.
5190         (fill_matrix) New function.
5191         (read_data_lines) Renamed nr_read_data_lines().  Remove debug
5192         printing.  Style fixes.  Message fixes.  Move code into
5193         fill_matrix().
5194         (read_matrices_without_rowtype) Rename
5195         matrix_data_read_without_rowtype().  Fix off-by-one error on
5196         loops.  Allocate nr_data[] memory from arena.
5197         (read_matrices_with_rowtype) Removed.
5198         (read_splits) Renamed nr_read_splits().  Style fixes.
5199         (read_factors) Renamed nr_read_factors().
5200         (dump_cell_content) Comment fixes.  Arguments changed.  Change
5201         debug printing.  All references changed.
5202         (output_data) Renamed nr_output_data().
5203         (static var wr_content) New var.
5204         (struct factor_data) New struct.
5205         (static var wr_data) New var.
5206         (static var wr_current) New var.
5207         (matrix_data_source_destroy_source) Removed.
5208         (read_matrices_with_rowtype) New function.
5209         (matrix_data_read_with_rowtype) New function.
5210         (wr_read_splits) New function.
5211         (compare_factors) New function.
5212         (wr_output_data) New function.
5213         (wr_read_rowtype) New function.
5214         (wr_read_factors) New function.
5215         (wr_read_indeps) New function.
5216         (glob var matrix_data_source) Make destroy_source member NULL as
5217         well.
5218
5219 Fri Jan 23 00:09:08 1998  Ben Pfaff  <blp@gnu.org>
5220
5221         * lexer.c: (syntax_error) Give better error message when at end of
5222         file.
5223
5224         * matrix-data.c: (var content_names[]) Fix PROX spelling.  Change
5225         N_SCALAR to output as plain N.
5226         (mdump_token) Change output format.
5227         (context) Fix message output interaction with spaces in input.
5228         (another_token) New function.
5229         (force_eol) Improved error message.
5230         (static var max_cell_index) New var.
5231         (read_matrices) Init `cells'.  factor_values is now per-cell.
5232         Init max_cell_index.
5233         (read_data_lines) Replace `compare' local with new `compare' arg.
5234         Debugging messages changed.  Only read factors if per_factor.
5235         Propagate error return from read_factors(), force_eol().
5236         Copy N_SCALAR values across the N vector.
5237         (read_matrices_without_rowtype) Don't init `cells'.  Don't need to
5238         check parentheses manually since we now have is_per_factor[].
5239         Call read_data_lines() with new args.  Check for end of data after
5240         looping, using another_token().
5241         (read_factors) Arguments changed.  Use max_cell_index to determine
5242         whether to read or compare factors.  Message fixes.
5243         (dump_cell_content) New function.
5244         (output_data) Completely rewritten because content types were
5245         supported to be nested inside factor values, not vice versa.
5246         
5247 Thu Jan 22 00:26:38 1998  Ben Pfaff  <blp@gnu.org>
5248
5249         * lexer.c: (syntax_error) Support formatted varargs messages.
5250
5251         * matrix-data.c: Turn debugging on by default.
5252         (static content_type[]) New array.
5253         (static content_names[]) New array.
5254         (static rowtype_, varname_) New vars.
5255         (static is_per_factor[]) New array.
5256         (static split_values) Moved declaration.
5257         (static n_continuous, first_continuous) New var.
5258         (cmd_matrix_data) Don't init split_values.  Assign ROWTYPE_ to
5259         rowtype_.  Simplify SPLIT code.  Init is_per_factor[].  Assign
5260         VARNAME_ to varname_.  Initialize first_continuous, n_continuous.
5261         Check for continuous variables.
5262         [DEBUGGING] (debug_print) Remove content_names[].
5263         (mdump_token) New macro.
5264         (mget_token_dump) New function.
5265         (mdump_token) New function.
5266         (context) New function.
5267         (mget_token) Fix messages.
5268         (static var data, split_values, factor_values) New vars.
5269         (read_matrices) Manage split_values, factor_values.
5270         (read_data_lines) New function.
5271         (read_matrices_without_rowtype) Implemented.
5272         (read_splits) Message fixes.  Uses `just_read'.
5273         (read_factors) New function.
5274         (output_data) New function.
5275         (matrix_data_source_destroy_source) Close the file handle.
5276         (glob var matrix_source) Change name from "DATA LIST" to "MATRIX
5277         DATA".
5278
5279         * str.c: (strpadcmp) Removed.
5280
5281         * vfm.c: (dump_splits) Initialize i; fix test for end of splits.
5282
5283 Sun Jan 18 00:30:59 1998  Ben Pfaff  <blp@gnu.org>
5284
5285         * Lots of source files: Add cast to unsigned character to calls to
5286         tolower() and toupper().
5287
5288         * aggregate.c: Set default_dict.splits to NULL.
5289
5290         * command.c: (static variable tab[]) Add MATRIX DATA.
5291
5292         * data-in.c: Add debugging defines.  Formatting fixes.
5293
5294         * expr-opt.c: Formatting fixes.
5295
5296         * lexer.c: (syntax_error) Message fixes.
5297
5298         * matrix-data.c: New enum series.
5299         (static vars fmt, section, diag, explicit_rowtype, signle_split,
5300         split_values, n_factors, factors, cells, pop_n, contents,
5301         n_contents) New vars.
5302         (cmd_matrix_data) Finished implementation.
5303         (compare_variables_by_mxd_vartype) New function.
5304         [DEBUGGING] (debug_print) New function.
5305         (static vars mtoken, mtokstr, mtoklen, mtokval) New vars.
5306         (read_matrices) New function.
5307         (read_matrices_without_rowtype) New function.
5308         (read_matrices_with_rowtype) New function.
5309         (read_splits) New function.
5310         (mget_token) New function.
5311         (force_eol) New function.
5312         [0] (test_tokenizer) New function.
5313         (matrix_data_source_destroy_source) New function.
5314         (glob var matrix_data_source) New var.
5315
5316         * misc.h: Include ieeefp.h if present.
5317
5318         * split-file.h: (cmd_split_file) Changes corresponding to struct
5319         dictionary changes.
5320
5321         * str.h: Fix memmem prototype.
5322
5323         * temporary.c: (save_dictionary, restore_dictionary,
5324         free_dictionary) Changes corresponding to struct dictionary
5325         changes.
5326
5327         * var.h: (MXD_* enums) New enum series.
5328         (struct matrix_data_proc) New struct.
5329         (struct split) Removed.
5330         (struct dictionary) Changed `splits' member from `split *' to
5331         `variable **'.
5332         (macro force_create_variable) New macro.  Replaced lots of
5333         create_variable()/assert() calls with calls to this macro.
5334
5335         * vars-atr.c: (discard_variables) Changed assertion.
5336         [GLOBAL_DEBUGGING] (force_create_variable) New function
5337         called by the macro of the same name.
5338         (clear_variable) Changes to delete splits from the dictionary
5339         corresponding to struct dictionary changes.
5340
5341         * vars-prs.c: (parse_variables) [GLOBAL_DEBUGGING] Check for
5342         corrupted variable `index' values in the dictionary passed in
5343         every time this function is called.
5344
5345         * vfm.c: (dump_splits, SPLIT_FILE_procfunc) Changes corresponding
5346         to struct dictionary changes.
5347
5348 Tue Jan 13 23:45:02 1998  Ben Pfaff  <blp@gnu.org>
5349
5350         * Makefile.am: (pspp_SOURCES) Add matrix-data.c.
5351
5352         * command.c: New includes.
5353         (static array cmd_table[]) Add ERASE, HOST, NEW FILE.
5354         (cmd_erase) New function.
5355         [unix] (shell) New function.
5356         (run_command) New function.
5357         (cmd_host) New function.
5358         (cmd_new_file) New function.
5359
5360         * expr-prs.c: (parse_primary) Message fix.
5361
5362         * inpt-pgm.c: Formatting fix.
5363         (cmd_reread) Implement the FILE subcommand.
5364
5365         * matrix-data.c: New file.
5366
5367         * q2c.c: (dump_header) Change output commenting style.
5368
5369         * weight.c: Comment fix.
5370
5371 Tue Jan 13 00:53:39 1998  Ben Pfaff  <blp@gnu.org>
5372
5373         * aggregate.c: (buf64_10x) Renamed buf64_1xx, all references
5374         changed.
5375         (buf_10x) Renamed buf_1xx, all references changed.
5376         (cmd_aggregate) Implemented cases 010, 011, 110, and 111 (all
5377         cases now implemented).
5378         (create_sysfile) New function.
5379         (agr_11x_func) New function.
5380
5381         * data-in.c: (parse_numeric) Work properly if there's an
5382         explicitly coded decimal point in the data and decimal places are
5383         specified on DATA LIST.  Bug reported by Dr Eberhard W Lisse
5384         <el@linux.lisse.na>.
5385
5386         * get.c: (cmd_get, cmd_save_internal) Allow extraneous slash
5387         before file specification on GET, SAVE, XSAVE.  Bug reported by Dr
5388         Eberhard W Lisse <el@linux.lisse.na>.
5389
5390         * q2c.c: [!HAVE_STRERROR] Include misc/strerror.c, not
5391         strerror.c.  Bug reported by Alexandre Oliva
5392         <oliva@dcc.unicamp.br>.
5393
5394         * sort.c: Include sort.h.  Comment fixes.  A few esthetic fixes.
5395         (static var separate_case_tab) New var.
5396         (cmd_sort_cases) Cancel temporary transformations here.  Free
5397         v_sort before return.
5398         (sort_cases) Run an EXECUTE procedure if SEPARATE is nonzero and
5399         we're reading from a sort stream.  Don't cancel temporary
5400         transformations.  Offload internal sorting to do_internal_sort().
5401         (do_internal_sort) New function.  Handles internal sorting even
5402         when SEPARATE is nonzero.  Doesn't free v_sort.
5403         (do_external_sort) Take new arg SEPARATE.  Only destroy `x' if
5404         it's non-NULL.
5405         (write_initial_runs) Take new arg SEPARATE.  Only destroy the old
5406         sink if SEPARATE is zero.
5407         (read_output_cases) Renamed read_sort_output(), all references
5408         changed.  Now uses separate_case_tab when it exists.
5409         (write_separate) New function.
5410
5411         * vfm.c: (page_to_disk) Destroy memory_source_cases, not
5412         memory_sink_cases.  Don't redundantly call
5413         vfm_source->destroy_source().
5414         (memory_stream_mode) After switching over, set memory_sink_cases
5415         to NULL.
5416
5417 Sat Jan 10 23:35:51 1998  Ben Pfaff  <blp@gnu.org>
5418
5419         * aggregate.c: (struct agr_var) Expand dbl[] array from 2 to 3
5420         elements.
5421         (static var prev_case) New, moved out of aggregate_single_case()
5422         local scope.
5423         (static var buf64_10x, buf_10x) New.
5424         (cmd_aggregate) Initialize prev_case.  Comment fixes.  Implement
5425         the 000, 001, 100, and 101 cases.  Free prev_case.
5426         (parse_aggregate_functions) Disallow scratch variables.
5427         (free_aggregate_functions) Only free agr_dict if non-null.  Use
5428         iter->function to determine numeric/string type, not
5429         iter->src->type.
5430         (aggregate_single_case) Don't manage prev_case.  Initialize
5431         aggregate info after dumping it.
5432         (accumulate_aggregate_info) Fix sum, weighted sum, mean, weighted
5433         mean, stddev, weighted stddev definitions.
5434         (dump_aggregate_info) Implemented.
5435         (initialize_aggregate_info) Renamed from
5436         initialize_aggregate_functions().  Initializes dbl[2].
5437         (agr_00x_trns_proc, agr_00x_end_func, write_case_to_sfm,
5438         agr_10x_trns_proc, agr_10x_trns_free, agr_10x_end_func) New.
5439
5440         * cases.c: (alloc_val) Removed.
5441
5442         * get.c: (cmd_save_internal) Initialize new `dict' member.
5443
5444         * sfm-write.c: (sfm_write_dictionary, write_header,
5445         write_variable, write_value_labels, write_documents) Reorganize,
5446         simplify for new parameter structure.
5447         (write_variable) Only one variable * argument now.
5448
5449         * sfm.h: (struct sfm_write_info) Removed `pri', `sec', and
5450         replaced by new `dict' member.
5451
5452         * temporary.c: (new_dictionary) Initialize n_documents.
5453
5454         * vars-atr.c: (dup_variable) Allocate `value's from dict into
5455         v->fv manually.
5456         (init_variable, replace_variable) Eliminate usage of alloc_val().
5457
5458         * vars-prs.c: (parse_DATA_LIST_vars) Accept PV_NO_SCRATCH option.
5459
5460         * vfm.c: (arrange_compaction) Allow `temporary' value of 2 to
5461         signal that AGGREGATE is to be used for forming final cases.
5462         (close_active_file) Call end_func before stopping lagging.  Cancel
5463         temporary after finishing compaction.
5464         (write_case) Comment fixes.  Cleaned up.
5465         (compact_case) Let AGGREGATE handle compaction when `temporary' is
5466         2.
5467
5468 Sat Jan 10 02:10:47 1998  Ben Pfaff  <blp@gnu.org>
5469
5470         * Makefile.am: (BUILT_SOURCES) Add means.c.
5471         (pspp_SOURCES) Add means.c.
5472         (EXTRA_DIST) Add means.q.
5473
5474         * command.c: (array cmd_table[]) Add MEANS.
5475
5476         * common.h: Esthetic fixes.  Comment fixes.  Test for
5477         MAX_SHORT_STRING greater than 8.
5478         (macros LOWEST, HIGHEST) New.
5479
5480         * data-in.c, data-list.c, recode.c: Comment fixes.
5481
5482         * means.q: New file, base version.
5483
5484         * mis-val.c: (parse_num_or_range, parse_numeric) Replace -DBL_MAX
5485         with LOWEST, DBL_MAX with HIGHEST.
5486
5487         * q2c.c: (dump_vars) Add an enum to array types giving the number
5488         of values for the enum.
5489
5490         * sfm-read.c: (sfm_read_dictionary, read_machine_flt64_info)
5491         Replace second_lowest_value with second_lowest_flt64.
5492
5493         * sfm-write.c: (write_variable, write_rec_7_34) Replace
5494         second_lowest_value with second_lowest_flt64.
5495
5496         * t-test.q: Comment fix.
5497
5498         * temporary.c: (restore_dictionary) Esthetic fix.
5499
5500         * tokens.h: (force_match_id, force_match, force_string, force_int,
5501         force_num, force_id) Replace msg() with syntax_error().
5502
5503         * var.h: (struct means_proc) New.
5504         (struct variable) Add mns member to `p' union.
5505
5506         * vars-prs.c: (parse_variable, parse_dict_variable,
5507         parse_variables, parse_DATA_LIST_vars) Replace msg() with
5508         syntax_error().
5509
5510 Thu Jan  8 22:28:41 1998  Ben Pfaff  <blp@gnu.org>
5511
5512         * Makefile.am: (pspp_SOURCES) Add tab.h.
5513
5514         * Most source files: Added a cast to unsigned char in usages of
5515         the ctype is*() functions.  Replaced `end of command expected'
5516         calls to msg() with calls to syntax_error().
5517
5518         * frequencies.q: (dump_condensed) Fix tab_dim() column reference.
5519
5520         * lexer.c: (hex_val) Removed (was dead code).
5521         (idmatch) Parenthesize function name to avoid macro expansion.
5522
5523         * postscript.c: Comment fixes.
5524         (ps_preopen_driver) Change default font size to 10pt.
5525
5526         * sfm-read.c: (read_variables) Byteswap sv.print, sv.write as
5527         int32s.
5528         (parse_format_spec) Change system-file format spec argument type
5529         to int32.  Parse the format spec with bitwise operators.
5530
5531         * sfmP.h: (struct sysfile_format) Removed.
5532         (struct sysfile_variable) Changed print, write members from
5533         sysfile_format to int32.
5534
5535         * tokens.h: Esthetic fixes.
5536         [__GNUC__] (macro id_match) New macro to hopefully speed up
5537         identifier matching.
5538         (macros match_id, match_tok, match_int) Implemented in
5539         compiler-independent manner; no longer GNU C only.
5540
5541         * vfm.h: Include time.h.
5542
5543 Mon Jan  5 11:06:15 1998  Ben Pfaff  <blp@gnu.org>
5544
5545         * data-list.c: (dump_fixed_table) Change tab_dim().
5546
5547         * dump-sysfile.c: (open_sysfile) Fix mmap() call.
5548
5549         * error.c: Include command.h.
5550
5551         * frequencies.g: Formatting fixes.
5552
5553         * frequencies.q: Add tab_dim() calls.  Make the total cell a
5554         joined cell.
5555
5556         * glob.c: Include command.h.
5557
5558         * sfm-read.c: (struct sfm_fhuser_ext) New members sysmis, highest,
5559         lowest.
5560         (sfm_read_dictionary) Initialize sysmis, highest, lowest.
5561         (sfm_read_machine_flt64_info) Update sysmis, highest, lowest.
5562         (read_variables) Byteswap sv.type; byteswap sv.print, sv.write as
5563         the other elements (is this right?).
5564         (read_variables) Use lowest, highest members.
5565         (parse_format_spec) New arg `vv' for more stringent checking.
5566         (dump_dictionary) Byteswaps nonexplicit data.
5567         (sfm_read_case) Byteswap numeric data.
5568
5569         * som.c: Initialize table_num to 1.
5570         (render_segments) Remember to increment y_index after each table
5571         segment.
5572
5573         * sysfile-info.c: (cmd_sysfile_info) Change tab_dim().  Don't call
5574         avl_count() on a NULL tree.  No title for the second table.
5575         (cmd_display) Handle DISPLAY VECTORS by calling display_vectors().
5576         Handle AS_SCRATCH as AS_NAMES.  Warn if no variables.  Re-enable;
5577         fix call to display_variables().
5578         (display_variables) Default to 4 columns, not 3.  Set up headers.
5579         Column title is Variable, not Name.  Fix index column.
5580         Add joint text.  Add tab_dim().  Handle value labels properly.
5581         Handle DISPLAY LABELS properly.  Draw boxes correctly.
5582         (describe_variable) Value labels don't need titles.  Don't clear
5583         nonexistent index column.
5584         (compare_vectors_by_name) New function.
5585         (display_vectors) New function.
5586
5587         * tab.c: (tab_height) Add assertion.
5588         (tab_null) Add debug code.
5589         (evaluate_dimensions) Add debug code.
5590
5591         * var.h: (struct variable) get_proc data is sometimes used
5592         simultaneously with other per-procedure info, therefore it was
5593         removed from the union.  All references changed.        
5594
5595 Sun Jan  4 18:13:33 1998  Ben Pfaff  <blp@gnu.org>
5596
5597         * ascii.c: (ascii_close_page) Put title on second line of headers
5598         if there is no subtitle.
5599
5600         * command.c: (glob var cur_proc) Move definition here, from
5601         common.c.
5602         (cmd_remark) Emit blank line before remarks.
5603
5604         * command.h: (glob var cur_proc) Move declaration here, from
5605         common.h.
5606
5607         * data-list.c: (dump_fixed_table) Fix messages.
5608         (dump_free_table) Call tab_nat_dim().
5609
5610         * descript.q: (dump_z_table) Modify tab_dim() call.
5611
5612         * frequencies.q: (dump_condensed, dump_statistics) Add tab_dim()
5613         call.
5614         (dump_statistics) Don't output header.
5615
5616         * groff-font.c: Minor format fix.
5617
5618         * html.c: Comment fix.
5619
5620         * list.q: (write_varname) Indent after advancing page.
5621
5622         * output.h: Minor reordering.
5623
5624         * postscript.c: Comment fixes.  Many places, '\n' was replaced by
5625         a reference to eol[].
5626         (struct ps_driver_ext) New member eol[].
5627         (ps_preopen_driver) Initialize eol[].
5628         (ps_postopen_driver) Fix sense of text for text_opt, line_opt
5629         defaults.  Handle headers.  Fix test for minimum page length.
5630         (static var option_tab[]) Add `line-ends'.
5631         (ps_option) Handle line-ends to change eol[].
5632         (postopen) Scale prop_em_width and fixed_width properly.  Set the
5633         prologue title to outp_title if applicable.  Replace the prologue
5634         line ends with eol[].  Call draw_headers() if headers are enabled.
5635         (text_width) New function.
5636         (out_text_plain) New function.
5637         (draw_headers) New function.
5638
5639         * print.c: (dump_table) Call tab_nat_dim().
5640
5641         * som.c: (som_blank_line) Only advance a line if not at the top of
5642         a page.
5643         (som_submit) Move several informational table calls here.
5644         Increment subtable_num if SOMF_NO_TITLE not set.
5645         (output_table) Advance a line if SOMF_NO_SPACING not set.
5646         (render_columns, render_segments, render_simple) Handle spacing
5647         between tables.  Handle table titles.  Remove debug output.
5648
5649         * som.h: (SOMF_*) New enum series.
5650         (struct som_table_class) New member `flags'.
5651
5652         * sysfile-info.c: (cmd_sysfile_info) Calls tab_nat_dim().  No
5653         headers or spacing.
5654         (display_variables) Calls tab_nat_dim().
5655         (describe_variable) Remove restriction on number of value labels.
5656         Make value labels separated by thin lines.
5657
5658         * tab.c: (tab_create) Default `flags' to none.
5659         (tab_float) New arg `w'.  All references changed.
5660         (tab_nat_dim) New function.
5661         (tab_output_text) No title or spacing.
5662         (tab_flags) New function.
5663         (tabi_flags) New function.
5664         (tabi_title) New function.
5665         (strip_height) Removed.
5666         (tabi_render) Skip title when necessary.
5667         (static var tab_tab_class) Add tabi_flags, tabi_title.
5668         (evaluate_dimensions) Disable display of column, row size.
5669         (sum_columns) Add title height to top header.
5670         (render_strip) Moved within file.
5671
5672         * tab.h: (struct tab_table) New member `flags'.
5673
5674         * vfm.c: (dump_splits) Calls tab_nat_dim().  No title.
5675
5676 Sat Jan  3 16:55:44 1998  Ben Pfaff  <blp@gnu.org>
5677
5678         * Most source files: Add `const' attribute in all appropriate
5679         places.
5680         
5681         * sysfile-info.c: (cmd_sysfile_info) Add tab_dim() call, add a
5682         column to the variables table for use by describe_variable().
5683         (cmd_display) Disable for the present.
5684         (display_documents) Don't wrap documents.
5685         (display_variables) Table has four columns now.
5686         (describe_variable) Table has four columns now.  Don't use a
5687         subtable, use joined cells instead.
5688
5689         * tab.c: (tab_create) Don't set `join'.
5690         (tab_realloc) ct array is not made up of a_string's.
5691         Reallocate trh, hrh, h arrays, initialize trh array.  Initialize
5692         cell contents on GLOBAL_DEBUGGING, not DEBUGGING.
5693         (text_format) New function.
5694         (tab_title) Rewritten, uses text_format().
5695         (tab_text) Rewritten, uses text_format().
5696         (tab_joint_text) New function.
5697         (tab_join) Removed.
5698         (static var hit) New variable.
5699         (render_strip) New args r1, r2.  Implement joined cells that fit
5700         on a single page.
5701         (tabi_render) Increment hit.  Pass new args to render_strip().
5702         (evaluate_dimensions) [GLOBAL_DEBUGGING] Check for uninitialized
5703         cells.  For t_naw and t_nah, ignore joined cells and null cells in
5704         calculations.
5705         
5706         * tab.h: (struct tab_join_rect) Removed.
5707         (struct tab_table) Removed `join'.
5708         (TAB_JOIN_MAIN) Removed.
5709         (struct tab_joined_cell) New struct.
5710         (TAT_NOWRAP) New enum.
5711
5712 Fri Jan  2 01:39:58 1998  Ben Pfaff  <blp@gnu.org>
5713
5714         * ascii.c: (ascii_postopen) Replace ASCII_* macros with their
5715         expansions.
5716         (ascii_postopen_driver) Fix initialization of *_spacing so that
5717         the TAL_0 bit doesn't count.
5718
5719         * data-list.c: (dump_fixed_table) Use natural width for Format
5720         column.
5721
5722         * glob.c: (rerange) Removed.
5723         (get_date) Formatting fixes.  Internationalization fix.
5724
5725         * html.c: (html_postopen_driver) Replace HTML_DEFAULT_OUTPUT_FILE
5726         with "pspp.html".
5727
5728         * postscript.c: (ps_postopen_driver) Replace
5729         PS_DEFAULT_OUTPUT_FILE with "pspp.ps".
5730
5731         * som.c: (som_submit) Don't eject page before every table.
5732         (output_table) Fix order of arguments on call to area().
5733         (render_columns) Fix calculation of max_len.
5734         
5735         * tab.c: (tabi_cumulate) Minor change to increase elegance.
5736         (render_strip) New function.
5737         (strip_height) New function.
5738         (tabi_render) Rewrite as calls to render_strip().
5739
5740         * tab.h: (TAT_* enums) Removed TAT_RICH, all references removed.
5741         Renumbered TAT_PRINTF, TAT_TITLE, TAT_FIX to correspond better
5742         with the TAB_* and OUTP_T_* constants.
5743         
5744 Thu Jan  1 11:53:52 1998  Ben Pfaff  <blp@gnu.org>
5745
5746         * Makefile.am: Formatting fixes.
5747
5748         * ascii.c: (ascii_postopen_driver) Initialize *_line_spacing[],
5749         *_line_width[].
5750
5751         * data-list.c: (dump_fixed_table) Add tab_dim() call.
5752
5753         * descript.q: (dump_z_table, display) Add tab_dim() calls.
5754
5755         * dump-sysfile.c: (glob var length) Make type off_t.
5756         (usage) Fix arguments.
5757         (main) Return 0.
5758
5759         * output.h: (OUTP_T_*) Change constants' value to match tab.h.
5760         Now right-justification is the default so many references had to
5761         change.
5762         (struct outp_class) Removed line_width, all references changed.
5763         (OUTP_DEV_*) Add OUTP_DEV_DISABLED.
5764         (struct outp_driver) Add elements horiz_line_width,
5765         vert_line_width, horiz_line_spacing, vert_line_spacing.  Remove
5766         som element.
5767
5768         * postscript.c: (outp_encodings) Formatting fixes.  Fix garbage
5769         collection.
5770         (postopen) Initialize all the informational members of
5771         outp_driver.
5772
5773         * som.c: (som_blank_line) New function, renamed from blank_line(),
5774         all references changed.
5775         (som_submit) Disables drivers whose pages can't be opened.
5776         (render_columns, render_simple, render_segments) Add debug output.
5777         (render_columns) Fix loop range.
5778         (render_simple) Don't try to render the headers, they're taken
5779         care of automatically.  Advance cp_y past the table when done.
5780         (render_segments) Fix loop ranges.
5781
5782         * tab.c: Initialize new members of tab_table.
5783         (tab_vline) Handle trv[]; don't set style for spacing-only lines.
5784         (tab_hline) Handle trh[]; don't set style for spacing-only lines.
5785         (tab_box) Handle trh[], trv[]; don't set style for spacing-only
5786         lines.
5787         (set_expr) Removed.
5788         (tab_dim) New function.
5789         (tab_col_width) Removed.
5790         (tab_row_height) Removed.
5791         (tab_output_text) Call tab_dim().
5792         (tabi_driver) Call evaluate_dimensions(), sum_columns().
5793         (tabi_area) Implemented.
5794         (tabi_cumulate) Implemented.
5795         (tabi_render) Partially implemented, but broken.
5796         (var tab_table_class) Made static.
5797         (evaluate_dimensions) New function.
5798         (sum_columns) New function.
5799
5800         * tab.h: (enum t_*) Now start at t_end.  New: t_ptw, t_nr, t_nc,
5801         t_nah, t_naw, t_neg, t_xch, t_dup, t_lbl, t_jnz, t_sac, t_sar,
5802         t_scr, t_srr, t_sentinel.  Removed: t_nat.
5803         (struct tab_table) New: wl, wr, ht, hb, trh, hrh, trv, wrv, dim,
5804         max_stack_height, w, h.  Removed: ce, re.
5805         (macro blank_line) Removed.
5806         (glob var zero_length) Removed.
5807
5808 Fri Dec 26 15:44:31 1997  Ben Pfaff  <blp@gnu.org>
5809
5810         * Most source files: include some of the new include files broken
5811         out of var.h.
5812         
5813         * Makefile.am: (pspp_SOURCES) Add all the new source files to the
5814         list.
5815
5816         * aggregate.c: (glob var outfile) Make static.
5817
5818         * command.c: (glob var pgm_state) Move here.
5819
5820         * common.c: (glob vars endian, second_lowest_value, pgmname,
5821         finished, curdate, cur_proc, start_interactive, history_file) Move
5822         here.
5823
5824         * descript.q: (structs dsc_z_score, descriptives_trns) Move here.
5825
5826         * file-handle.q: (glob vars files, inline_file) Move here.
5827
5828         * glob.c: Lost lots of glob vars, detailed in individual file
5829         entries.
5830         (init_glob) set_printer, set_screen were obsolete, deleted.
5831         set_cprompt has fewer spaces because pspp has fewer letters than
5832         fiasco.
5833
5834         * inpt-pgm.c: (glob vars inp_init, inp_init_size) Move here.
5835         (inp_nval) Made static.
5836
5837         * lexer.c: (glob vars token, tokval, tokstr, tokstr_size,
5838         tokstr_len, toklongstr, tokint) Move here.
5839
5840         * misc.c: Lost several vars and functions.
5841
5842         * set.q: (all the set_* variables) Move here.
5843
5844         * str.c: (strmaxcpy, strbarepadcpy, strbarepadlencpy, strpadcpy,
5845         blpstrset, strpadcmp, memrev, memrmem, cmp_str) Move here from
5846         misc.c.
5847
5848         * tab.c: (set_expr, tab_col_width, tab_row_height) New functions.
5849
5850         * tab.h: (enum series t_*) New enums.
5851         (struct tab_table) Use arena struct tag.  New members ce, re.
5852
5853         * tokens.h: Comment fixes.
5854
5855         * var.h: Move lots of enums and variables and functions and
5856         structures to other files.  Use and declare a lot more union and
5857         struct tags.  Comment fixes.  
5858
5859         * vector.c: (glob vars vec, nvec) Move here.
5860
5861         * vfm.c: (glob vars reinit_sysmis, reinit_blanks, init_zero,
5862         init_blanks, last_vfm_invocation) Move here.
5863
5864         * cases.h: New file.
5865         (struct long_vec) Move here.
5866         (vec_init, vec_clear, vec_insert, vec_delete, devector, envector)
5867         Move here.
5868
5869         * command.h: New file.
5870         (STATE_* enums) Move here.
5871         (glob var pgm_state) Move here.
5872
5873         * format.c: New file.
5874         (glob var formats) Move here.
5875         (parse_format_specifier_name, fmt_to_string,
5876         check_input_specifier, check_output_specifier,
5877         check_string_specifier, convert_fmt_ItoO, parse_format_specifier)
5878         Move here.
5879
5880         * format.h: New file.  Move functions now in format.c here.
5881         (FMT_* enums) Move here.
5882         (struct fmt_desc) Move here.
5883         (FCAT_* enums) Move here.
5884         (struct fmt_spec) Move here.
5885         (glob vars formats, fmt_parse_ignore_error) Move here.
5886
5887         * inpt-pgm.h: New file.
5888         (INP_* enums) Move here, make #defines into enums.
5889         (glob vars inp_init, inp_init_size) Move here.
5890
5891         * sort.h: New file.
5892         (glob vars v_sort, nv_sort) Move here.
5893         (sort_cases, read_sort_output) Move here.
5894
5895         * vector.h: New file.
5896         (struct vector) Move here, add struct tag.
5897         (glob vars vec, nvec) Move here.
5898         (find_vector) Move here.
5899
5900         * New file.
5901         (glob vars last_vfm_invocation, temp_case, reinit_sysmis,
5902         reinit_blanks, init_zero, init_blanks) Move here.
5903         (struct case_stream) Move here.
5904         (glob vars vfm_source, vfm_sink, vfm_memory_stream,
5905         vfm_disk_stream, sort_stream, data_list_source,
5906         input_program_source, file_type_source, get_source, n_lag) Move
5907         here.
5908         (procedure, write_case, lagged_case, compact_case, page_to_disk)
5909         Move here.
5910                 
5911 Wed Dec 24 22:40:42 1997  Ben Pfaff  <blp@gnu.org>
5912
5913         * Makefile.am: (pspp_SOURCES) Added html.c, som.c, som.h.
5914         (LDADD) Add libdcdflib.
5915
5916         * ascii.c: Comment and formatting fixes.  Almost every external
5917         function had an assert added, checking driver_open and page_open.
5918         (ascii_init_driver) Broken into ascii_preopen_driver,
5919         ascii_postopen_driver, ascii_close_driver.  Manages driver_open.
5920         (ascii_open_page) Sets page_open.
5921         (ascii_close_page) Clears page_open.
5922
5923         * html.c: Comment and formatting fixes.  Almost every external
5924         function had an assert added, checking driver_open and page_open.
5925         (html_init_driver) Broken into html_preopen_driver,
5926         html_postopen_driver, html_close_driver.  Manages driver_open.
5927         (html_open_page) Sets page_open.
5928         (html_close_page) Clears page_open.
5929         (html_submit) Disabled.
5930
5931         * lexer.c: (parse_string) Remove debugging printf.
5932
5933         * list.q: (determine_layout) Open a page if one is not yet open.
5934
5935         * output.c: Comment fixes.
5936         (add_class) Set the class member of the new list element.
5937         (parse_options) Don't handle device type.
5938         (colon_tokenize) New function.
5939         (configure_driver) New four-field format with a field for device
5940         type.  Now initialize driver_open, page_open, next, and prev
5941         fields.  Use new colon_tokenize() function.  Don't do a memory
5942         copy to replace a driver, it doesn't work; instead delete the old
5943         driver and insert a new one.
5944         (destroy_driver) Don't call som_destroy_driver().  Close the page
5945         if it's open.  Find the class in the list of classes and decrement
5946         that reference count.  Remove the driver from the global driver
5947         list.
5948         (outp_iterate_enabled_drivers) Renamed outp_drivers().  All
5949         references changed.  Rewritten.  Don't return a driver that's not
5950         enabled.
5951         (outp_eject_page) All references to som_internal_eject_page()
5952         changed to use this.  Sets cp_x to 0 as well as cp_y.
5953
5954         * output.h: (OUTP_I_* enums) Removed.
5955         (struct som_submission_form) Removed.
5956         (struct outp_class) init_driver broken into preopen_driver,
5957         postopen_driver, and close_driver.  submit changed to take a
5958         som_table argument.
5959
5960         * postscript.c: Comment and formatting fixes.  Almost every
5961         external function had an assert added, checking driver_open and
5962         page_open.
5963         (ps_init_driver) Broken into ps_preopen_driver,
5964         ps_postopen_driver, ps_close_driver.  Manages driver_open.
5965         (ps_open_page) Sets page_open.
5966         (ps_close_page) Clears page_open.
5967
5968         * som.c: New file, base implementation.
5969         
5970         * som.h: (struct som_table) Add struct tag.
5971         (enum SOM_COL_ACROSS) Removed.
5972         (SOM_ROWS, SOM_COLUMNS) New enums.
5973         (struct som_table_class) Add member `cumulate'.  Remove `segment';
5974         change `render' arguments.
5975         (struct som_point, struct som_rect) Removed.
5976         (som_submit_table) Fixed typo, should have been som_submit.
5977
5978         * sysfile-info: (describe_variable) Don't try to insert a
5979         subtable; just destroy it for now.
5980
5981         * t-test.q: Include dcdflib/cdflib.h instead of cdflib.h.  Fix
5982         references to value labels.
5983
5984         * tab.c: (tab_destroy) New function.
5985         (tab_columns) Change argument.
5986         [0] (tab_submit) Remove dead code.
5987         (tab_title) Allocate string from the table's arena.
5988         (tab_output_text) Only free the buffer if we allocated it.
5989         (tab_submit) New function.
5990         (static vars t, d) New static vars.
5991         (tabi_table, tabi_driver, tabi_count, tabi_area, tabi_columns,
5992         tabi_headers, tabi_cumulate, tabi_render) New functions.
5993         (glob var tab_table_class) New global var.
5994
5995         * tab.h: (struct tab_join_rect) Don't use a som_rect; directly
5996         encapsulate the rectangle.  All references changed.
5997         
5998 Sun Dec 21 16:18:58 1997  Ben Pfaff  <blp@gnu.org>
5999
6000         * All header files updated to use struct tags in addition to
6001         typedefs for all structures.  Don't use word `struct' in struct
6002         tags.
6003         
6004         * Makefile.am: (pspp_SOURCES) Remove html.c.
6005         (INCLUDES) Replace the lib/* includes with a single lib/ include;
6006         all references updated.
6007
6008         * command.c: (parse_cmd) Remove call to som_check_workspace.
6009         (output_line) Update to new som.
6010
6011         * data-in.c: (parse_numeric) A single dot is not an error; it is
6012         the system-missing value.
6013
6014         * data-list.c: (dump_fixed_table, dump_free_table) Update to new
6015         som.
6016
6017         * data-out.c: Added `const' as appropriate to many prototypes.
6018         (convert_E, convert_F, convert_CCx) Take double argument instead
6019         of value * argument.
6020         (convert_format_to_string) Call changed functions appropriately.
6021         Instead of modifying the caller's value for FCAT_SHIFT_DECIMAL,
6022         make a local copy of the value.
6023
6024         * descript.q: Remove custom_variables() prototype now provided by
6025         q2c.  
6026         (custom_variables) Don't increment sbc_variables, the caller does
6027         this.
6028         (dump_z_table, display) Update to new som.
6029
6030         * error.c: (vmsg) Add const to prototype.  Remove code to handle
6031         `too many errors' condition.
6032         (check_error_count) New function.
6033         (msg) Add const to prototype.
6034
6035         * filename.c: (open_file) Rewrite for elegance.
6036
6037         * frequencies.q: Remove custom_*() prototypes now provided by q2c.
6038         (dump_full, dump_condensed, dump_statistics) Update for new som.
6039
6040         * list.q: Don't include somP.h.  Change all references to
6041         som_driver_ext to refer to the new members of som_driver.  Change
6042         som_internal_eject_page() references to outp_eject_page().
6043
6044         * main.c: (parse) Rewrite for elegance.  Add call to
6045         check_error_count().
6046
6047         * output.c: (add_class, outp_list_classes, outp_configure_driver)
6048         Rewrite or revise for new outp_driver_class_list structure.
6049         (outp_iterate_enabled_drivers) Fix comparison between disabled
6050         devices and current device type.
6051         (outp_eject_page) New function.
6052
6053         * output.h: Comment fixes.
6054         (struct outp_driver) New members driver_open, page_open, cp_x,
6055         cp_y, font_height, prop_em_width, fixed_width.  Deleted members
6056         ref_count, next.
6057         (struct outp_driver_class_list) New struct.
6058         (outp_class_list) Changed to type outp_driver_class_list; all
6059         references updated.
6060
6061         * print.c: (dump_table, print_trns_proc) Updated for new som.
6062
6063         * q2c.c: (dump_vars) Simplify array subcommand code.  Declare
6064         prototypes for custom subcommands.
6065         (dump_subcommand) Always include the `else'.
6066         (dump_parser) Fix comments in output code.
6067
6068         * set.q: Reordered functions.
6069
6070         * som-frnt.c, som-high.c, som-low.c, somP.h: Removed.
6071         
6072         * som.h: Rewritten from scratch.
6073
6074         * str.h: Remove dead code.
6075
6076         * tab.c, tab.h: New files, base implementation.
6077
6078         * sysfile-info.c: (cmd_sysfile_info, describe_variable) Update to
6079         new som.
6080
6081         * t-test.q: New code from John Williams
6082         <johnr.williams@stonebow.otago.ac.nz>.  Include math.h, cdflib.h.
6083         Many many new static vars and defines.
6084         (precalc, postcalc, g_postcalc, z_postcalc, t_pairs, t_groups,
6085         groups_calc, pairs_calc, z_dev_calc, z_calc) New functions.
6086         (struct value_list) New struct.
6087         (variance, covariance, pooled_variance, oneway, pearson_r, f_sig,
6088         t_crt, t_sig, print_t_groups) New functions.
6089         (cmd_t_test) Implemented.
6090
6091         * temporary.c: (cancel_temporary) Only free the temp_dict if it's
6092         non-NULL.
6093
6094         * vfm.c: (dump_splits) Update to new som.
6095
6096 Thu Dec  4 23:02:22 1997  Ben Pfaff  <blp@gnu.org>
6097
6098         * Makefile.am: (fiasco_SOURCES) Add html.c.
6099
6100         * aggregate.c: Base source.
6101
6102         * ascii.c: (postopen, preclose) Reformat.
6103
6104         * data-out.c, expr-evl.c: Comment fixes.
6105         
6106         * filename.c: (open_file) When opening a file for writing, use
6107         line buffering instead of full buffering for better interactive
6108         performance.  Suggested by Valerio Aimale
6109         <valerio@svpop.com.dist.unige.it>.  Also, recognize special file
6110         names `stdin', `stdout', `stderr'.
6111
6112         * groff-font.c: Comment fixes.
6113
6114         * html.c: New file; base version.
6115
6116         * list.q: (write_all_headers, clean_up, determine_layout,
6117         list_cases) Ignore `special' devices for now.  Needs to be fixed
6118         later.
6119
6120         * output.c: (outp_init) Add html driver to list; reverse list
6121         order.
6122
6123         * output.h: (struct outp_class_struct) New members `special',
6124         `submit'; comment fixes.  All references changed.
6125
6126         * postscript.c: (ps_init_driver) Make defaults for text_opt,
6127         line_opt depend on whether the OUTP_DEV_SCREEN bit is set on the
6128         device.
6129         (postopen) Comment fix.
6130         (preclose) Comment fixes, formatting fixes.  Change x->file.file
6131         references to more proper f->file.
6132
6133         * som-high.c: (som_submit_table) Special classes use their own
6134         renderers.
6135
6136         * som.h: Comment fixes.
6137
6138         * temporary.c: (new_dictionary) Don't try to xstrdup() a NULL
6139         string.
6140         
6141 Tue Dec  2 14:36:07 1997  Ben Pfaff  <blp@gnu.org>
6142
6143         * Makefile.am: (fiasco_SOURCES) Add aggregate.c back in.
6144
6145         * aggregate.c: Still working on this.
6146
6147         * command.c: (cmd_table[]) Add AGGREGATE back in.
6148         (split_words) Make '-' a legal word separator as well as ' '.
6149
6150         * main.c: Comment fixes.
6151
6152         * q2c.c: (dump_parser) Don't require the procedure's full name to
6153         be present, in the generated source.
6154
6155         * t-test.q: Change name to `t-test' from `t test'.  Let PAIRS be
6156         multiply specified and let it be default; let MISSING, CRITERIA,
6157         FORMAT be multiply specified.
6158         (cmd_t_test) Parse command name.  [DEBUGGING] Call debug_print().
6159         (custom_groups) Fix defaults.
6160         (custom_pairs) Check whether this is a PAIRS subcommand before
6161         attempting to parse.  Better garbage collection.  Proper storage
6162         allocation.
6163         [DEBUGGING] (debug_print) New function.
6164
6165         * temporary.c: Comment fixes.
6166         (copy_variable) Don't copy variable name and index.
6167         (save_dictionary) Copy variable name and index by hand.
6168
6169         * vars-atr.c: Comment fixes.
6170         (create_variable) New dictionary argument.  All references
6171         changed.
6172         (common_init_stuff) New dictionary argument.  All references
6173         changed.
6174         (init_variable) New dictionary argument.  All references changed.
6175         (dup_variable) New function.
6176
6177         * vars-prs.c: (parse_variables) If there are any errors, we always
6178         return 0.  Previously, it was possible for some types of errors to
6179         be ignored.
6180         
6181 Sat Nov 22 01:20:59 1997  Ben Pfaff  <blp@gnu.org>
6182
6183         * Makefile.am: (fiasco_SOURCES) For 0.1.5 release, remove
6184         aggregate.c.
6185
6186         * command.c: (cmd_table[]) Comment out AGGREGATE; add T TEST.
6187
6188         * list.q, t-test.q: Remove ALL option from VARLIST declaration in
6189         grammar rules.
6190
6191         * q2c.c: Comment fixes.
6192         (SBC_* enums) Remove SBC_VARLIST_ALL; all references removed.
6193         
6194         * t-test.q: (cmd_list) Rename cmd_t_test.
6195
6196         * temporary.c: (new_dictionary) Don't declare as static.
6197         
6198 Fri Nov 21 00:03:06 1997  Ben Pfaff  <blp@gnu.org>
6199
6200         * aggregate.c: Changes, still not finished.
6201
6202         * file-handle.q, frequencies.q, list.q, set.q: Comment fixes.
6203
6204         * q2c.c: Comment fixes.  Now its output is internationalized.
6205         (get_token) Fix parsing of escapes within literal strings.
6206         (main) Fix bad #line directives in output.
6207
6208         * t-test.q: Base implementation.
6209
6210         * temporary.c: (new_dictionary) New function.
6211         (restore_dictionary) [__CHECKER__] Change fill character to *
6212         (from @).
6213         
6214 Sun Nov 16 01:29:57 1997  Ben Pfaff  <blp@gnu.org>
6215
6216         * Makefile.am: (BUILT_SOURCES, fiasco_SOURCES) Add t-test.c
6217
6218         * aggregate.c: Changes, still not finished.
6219
6220         * descript.q, list.q: Comment fixes.
6221
6222         * q2c.c: Almost completely rewritten.
6223
6224         * t-test.q: New file, not complete.
6225
6226 Fri Nov 14 00:14:48 1997  Ben Pfaff  <blp@gnu.org>
6227
6228         * aggregate.c: Changes, still not finished.
6229
6230         * sort.c: (sort_cases) Call cancel_temporary() instead of doing it
6231         by hand.
6232
6233         * temporary.c: (cancel_temporary) New function.
6234
6235         * vars-atr.c: (discard_variables) Call cancel_temporary() instead
6236         of doing it by hand.
6237
6238         * vfm.c: (close_active_file) After restoring a TEMPORARY
6239         dictionary, set temp_dict to NULL.  Cancel TEMPORARY through
6240         cancel_temporary().
6241         (SPLIT_FILE_procfunc) Comment fix.
6242
6243 Tue Oct 28 16:08:45 1997  Ben Pfaff  <blp@gnu.org>
6244
6245         * Makefile.am: (fiasco_SOURCES) Add aggregate.c.
6246
6247         * aggregate.c: New file, not finished yet.
6248
6249         * command.c: (cmd_table) Add AGGREGATE.
6250
6251         * common.h: (pgm_state) Move declaration to var.h.
6252
6253         * lexer.c: (bin_value_func, oct_value_func, hex_value_func) i18n
6254         fixes.
6255         (parse_string) Message fix.
6256
6257         * recode.c: Comment fix.
6258
6259         * sfm-read.c: (read_variables) Code esthetic fixes.
6260         (write_header) Default date is `Jan', not `JAN'.
6261
6262         * sfmP.h: (bswap_int32) [!__linux__] Fix off-by-one errors.
6263
6264         * sort.c: (cmd_sort_cases) Farm the work out to new function
6265         parse_sort_variables().
6266         (parse_sort_variables) New function.
6267         (sort_cases) New function.  Cancels temporary transformations,
6268         which sorting didn't do previously.
6269         (cmd_sort_cases) Better garbage collection on error.  Uses
6270         do_external_sort().
6271         (write_initial_runs, merge_once) Improved code esthetics.
6272         (sort_stream_read) Reduced to one call to read_output_cases().
6273         (read_output_cases) New function.
6274
6275         * var-labs.c: (cmd_variable_labels) Re-enabled truncation of
6276         variable labels to 120 characters.
6277
6278         * var.h: Comment fixes.
6279         (glob var pgm_state) From common.h.
6280
6281         * vars-atr.c: (discard_variables) Set pgm_state to STATE_INIT.
6282
6283         * vars-prs.c: (parse_DATA_LIST_vars) Support PV_SINGLE in
6284         options.  Set *names to NULL on error.
6285
6286         * vfm.c: (memory_stream_init) Assert compaction_nval != 0.
6287
6288 Thu Oct  9 09:59:49 1997  Ben Pfaff  <blp@gnu.org>
6289
6290         * sfm-write.c, vfm.c: [HAVE_UNISTD] #include <unistd.h>, needed by
6291         SunOS4.  From Alexandre Oliva <oliva@dcc.unicamp.br>.
6292
6293 Wed Oct  8 18:55:24 1997  Ben Pfaff  <blp@gnu.org>
6294
6295         * vfm.c: (page_to_disk) Added missing local variables.
6296
6297 Tue Oct  7 20:23:17 1997  Ben Pfaff  <blp@gnu.org>
6298
6299         * get.c: Comment fix.
6300
6301         * sort.c: (cmd_sort_cases) Attempt to perform internal sort if the
6302         source is anything other than a disk stream, not just if it's in a
6303         memory stream.  Call page_to_disk() before external sort.
6304         (allocate_cases) Message fix.
6305
6306         * vfm.c: (prepare_for_writing) Warn user when paging workspace to
6307         disk.
6308         (page_to_disk) New function.
6309
6310 Sun Oct  5 15:56:14 1997  Ben Pfaff  <blp@gnu.org>
6311
6312         * Makefile.am: (INCLUDES) Include .. instead of $(top_srcdir).
6313
6314         * common.h: (macro strerror) Remove.  From Alexandre Oliva
6315         <oliva@dcc.unicamp.br>.
6316
6317         * get.c: (dict_delete_run) The number of variables to delete is
6318         not necessarily the number of variables that need to be shifted
6319         up.
6320         (trim_dictionary) Don't set *options to 0.  Fix bug that caused
6321         too many variables to be deleted.
6322
6323         * postscript.c: Comment fix.
6324
6325         * q2c.c: Include strerror.c.  From Alexandre Oliva
6326         <oliva@dcc.unicamp.br>.
6327
6328         * set.q: #undef ON and OFF.  From Alexandre Oliva
6329         <oliva@dcc.unicamp.br>.
6330
6331         * sfm-read.c: (sfm_read_dictionary) Don't set the file class too
6332         early, otherwise errors cause a bad free().
6333
6334         * str.h: (macro nvsprintf) s/FORMATS/FORMAT/ typo.  From Alexandre
6335         Oliva <oliva@dcc.unicamp.br>.
6336
6337         * temporary.c: (save_dictionary) Don't allocate memory if
6338         n_documents is 0.
6339
6340         * vfm.c: (memory_stream_write) Message fix.
6341
6342 Sat Oct  4 16:20:43 1997  Ben Pfaff  <blp@gnu.org>
6343
6344         * command.c: (static var cmd_table[]) Define REPEATING DATA
6345         command.
6346
6347         * common.h: Added support for broken systems that are missing
6348         EXIT_SUCCESS, EXIT_FAILURE, RAND_MAX, and/or strerror().
6349
6350         * Many source files: Replace syntax error messages via msg() with
6351         call to syntax_error().
6352
6353         * data-list.c: (dump_fixed_table) Add support for dumping table
6354         for REPEATING DATA as well as DATA LIST FIXED.
6355         (cmd_repeating_data) Allows and requires `/' between subcommands.
6356         Does proper thing with allowing rpd.starts_end to stay 0.  Allows
6357         CONTINUED specifications to be omitted.  Forces CONTINUED to be
6358         specified if ID is.  Calculates starts_end, cont_end from logical
6359         record length as reported by fhp.  Calls dump_fixed_table() if
6360         requested.  Fixed length of record copied by memcpy.
6361         (parse_num_or_var) Sets `num' to 0, not NOT_INT, for variables.
6362         Message fix.
6363         (realize_value) Returns sensible value for out-of-range variable
6364         values.
6365         (rpd_parse_record) New argument `ofs'.  Fixed confusion between
6366         length of occurrences and length of line.  Added warning for
6367         fields that exceed the line length.  Fixed infinite loop.
6368         (read_one_set_of_repetitions) Numerous minor changes for more
6369         complete SPSS compliance.  Message fixes.
6370
6371         * dfm.c: (dfm_close) If the file being closed is the inline file,
6372         read all the remaining data before closing it.
6373         (dfm_get_record) Don't close the file on lossage, as either it
6374         has been closed already or it doesn't belong to us.
6375
6376         * error.c: (puts_stdout) New function.
6377         (vmsg) Use puts_stdout instead of puts.
6378
6379         * file-handle.q: (fh_record_width) New function.
6380
6381         * inpt-pgm.c: (init_case) Fixed buffer overrun when inp_nval % 4
6382         == 0.
6383         (clear_case) Ditto.
6384         (input_program_source_read) Made an old kluge an approved method.
6385
6386         * lexer.c: (syntax_error) New function.
6387
6388         * misc.c: [BROKEN_RAND] (ansi_rand, ansi_srand; static var next)
6389         New.
6390
6391         * output.c: (oupt_get_paper_size) Message fix.
6392
6393         * q2c.c: Numerous fixes to formatting of generated code made to
6394         conform to GNU coding standards.  Uses syntax_error() in generated
6395         code.  Other miscellaneous generated message fixes.  Added support
6396         for broken systems that are missing EXIT_SUCCESS, EXIT_FAILURE,
6397         RAND_MAX, and/or strerror().
6398
6399 Sat Oct  4 02:09:56 1997  Ben Pfaff  <blp@gnu.org>
6400
6401         * data-in.c: Comment fixes.
6402
6403         * data-list.c: (struct repeating_data_trns) New member `id_spec'.
6404         (find_variable_input_spec) New function.
6405         (cmd_repeating_data) Initializes id_spec.
6406         (rpd_parse_record) Implemented.
6407         (read_one_set_of_repetitions) Returns -3 by default in order to
6408         kluge out some potential bugs.
6409
6410         * data-out.c: Comment fixes.
6411
6412         * file-type.c: (internal_cmd_record_type) Message fix.
6413
6414         * inpt-pgm.c: (input_program_source_read) Special temporary kluge
6415         for handling -3 return value.
6416
6417 Sat Sep 20 23:58:15 1997  Ben Pfaff  <blp@gnu.org>
6418
6419         * data-list.c: Comment fixes.
6420         (struct dls_var_spec) Reordered members.
6421         (read_from_data_list_fixed) Restructured.
6422         (struct repeating_data_trns) Reordered members.  Renamed `starts'
6423         as `starts_beg', `ends' as `starts_end'.
6424         (cmd_repeating_data) Calculates length of repeated data if
6425         necessary and possible.
6426         (parse_num_or_var) Don't allow string variables.
6427         (realize_value) New function.
6428         (rpd_msg) New function.
6429         (rpd_parse_record) New function.  Currently stubbed out.
6430         (read_one_set_of_repetitions) Implemented.
6431
6432         * inpt-pgm.c: (input_program_source_read) Comment fix.
6433
6434 Thu Sep 18 21:34:57 1997  Ben Pfaff  <blp@gnu.org>
6435
6436         * command.c: (cmd_end_repeat_p) Removed.
6437         (init_cmd_parser) Doesn't set cmd_end_repeat_p.
6438         (parse_cmd_name) Removed.
6439
6440         * data-list.c: Comment fixes.
6441         (data_list_pgm) Removed `eof' member.
6442         (static var first) New var.
6443         (cmd_data_list) Sets `first'.  Ensures that DATA LIST uses the
6444         FILE TYPE file inside FILE TYPE structures.
6445         (append_var_spec) Appends to *first, not dls.spec.
6446         (parse_fixed) Message fixes.
6447         (struct rpd_num_or_var) New.
6448         (struct repeating_data_trns) New.
6449         (static var rpd) New.
6450         (cmd_repeating_data) New function.
6451         (parse_num_or_var) New function.
6452         (parse_repeating_data) New function.
6453         (read_one_set_of_repetitions) New function.
6454
6455         * file-type.c: (cmd_file_type) Message fixes.  Always
6456         default_handle to FILE TYPE file handle.
6457         (internal_cmd_record_type) Message fixes.
6458
6459 Wed Aug 20 14:22:03 1997  Ben Pfaff  <blp@gnu.org>
6460
6461         * repeat.c: Comment fix.  Disable debugging.
6462
6463         * temporary.c: (restore_dictionary) Sets splits to NULL and
6464         n_splits to 0 before destroying the variables because now doing
6465         this tries to remove split variables.
6466
6467         * vars-atr.c: (discard_variables) Asserts that n_splits is 0 after
6468         destroying the dictionary.
6469         (clear_variable) Removes a variable from splits after destroying
6470         it.
6471
6472 Mon Aug 18 18:06:55 1997  Ben Pfaff  <blp@gnu.org>
6473
6474         * cmdline.c: (set_compat) Removed.
6475         (pick_compat) Removed.
6476         (parse_command_line) Removed -c option.
6477         (pre_syntax_message) Removed -c option.
6478         (usage) Remove compatibility code.
6479
6480         * common.h: (macros VER_PC, VER_WND, VER_X) Removed.
6481         (glob var compat) Removed.
6482
6483         * compute.c: (type_check) Fixed messages about type mismatches.
6484
6485         * data-list.c: (cmd_data_list) Removed compatibility code.
6486         (fixed_parse_compatible) Calls convert_negative_to_dash().
6487         Fixed bug where it only set the variable in fx.spec if it created
6488         the variable itself.
6489         (dump_fmt_list) Spelling fix.
6490         (cut_field) Removed compatibility code.
6491
6492         * dfm.c: (cmd_begin_data) Don't require a command terminator on
6493         BEGIN DATA command.
6494
6495         * expr-evl.c: (evaluate_expression) Implement LAG.
6496
6497         * expr-prs.c: (parse_add) Calls convert_negative_to_dash().
6498         (parse_neg) Calls convert_negative_to_dash().
6499         (LAG_func) Increases n_lag to the lag requested.  Fixed assignment
6500         bug.
6501
6502         * expr.h: (struct expression_struct) Removed member max_lag.
6503
6504         * file-type.c: (parse_col_spec) Calls convert_negative_to_dash().
6505         (internal_cmd_record_type) Removed special handling to produce
6506         negative numbers from dash tokens.
6507
6508         * getline.c: (static var DO_REPEAT_level) New var.
6509         (getl_add_DO_REPEAT_file) Increments DO_REPEAT_level.
6510         (handle_line_buffer) Copies the line into getl_buf; doesn't call
6511         copy_with_DO_REPEAT_substitutions().
6512         (getl_read_line) Maintains value of getl_mode.  Calls
6513         perform_DO_REPEAT_substitutions() whenever DO_REPEAT_level is
6514         positive.
6515         (getl_close_file) Decrements DO_REPEAT_level when appropriate.
6516
6517         * getline.h: (getl_mode) New glob var.
6518
6519         * glob.c: Comment fixes.
6520         (init_glob) Restructured.  Sets set_seed.
6521         (init_compat_dependent) Removed.  All references removed.
6522         (get_date) Format changed from MM/DD/YY to DD MMM YYYY.
6523         (__htonl, __htons) Removed.  (What were these for?)
6524
6525         * lexer.c: (static var tbl) Dash set to class CNUM.
6526         (make_hexit) New function from data-out.c.
6527         (get_token_representation) Rewritten.
6528         (convert_negative_to_dash) New function.
6529         (lex_init_compat_dependent) Removed.
6530         (yylex) A dash is parsed as part of a number if it is followed by
6531         a digit.  The ASCII representation of a number is copied to
6532         tokstr.  String parsing farmed out to parse_string().  Comment
6533         fixes.
6534         (bin_value_func, oct_value_func, hex_value_func, parse_string) New
6535         functions.
6536         (preprocess_line) Line processing depends on interactive/batch
6537         mode, not on compatibility mode.  Removed PC+ compatibility code.
6538
6539         * loop.c: (loop_3_trns_proc) Comment fix.
6540
6541         * main.c: Remove dead code.
6542         (main) Remove call to init_compat_dependent().
6543
6544         * misc.c: (convert_fmt_ItoO) Make E format conversion more
6545         conformant.
6546
6547         * print.c: (parse_string_argument) Calls
6548         convert_negative_to_dash().
6549         (fixed_parse_compatible) Calls convert_negative_to_dash().
6550
6551         * repeat.c: (RPT_* defines) Removed.
6552         (struct rpt_numeric) Removed.
6553         (struct repeat_entry) New member type, changed `replacement' from
6554         char * to char **.
6555         (clean_up) Deallocation adapted to new repeat_entry.
6556         (internal_cmd_do_repeat) `type' defaults to 0.  Remove lookahead()
6557         usage.  Creates vars for `type' of 1.
6558         (parse_ids) Sets type of 1.  Adapted to new repeat_entry.
6559         (store_numeric) Rewritten, new interface.
6560         (parse_numbers) Rewritten.
6561         (parse_strings) Rewritten.
6562         (find_DO_REPEAT_substitution) New function.
6563         (perform_DO_REPEAT_substitutions) New function.
6564         (copy_with_DO_REPEAT_substitutions) Removed.
6565         (debug_print) Rewritten.
6566
6567         * set.q: Comment fix.
6568         (custom_results) Removed compatibility code.
6569         (internal_cmd_set) Removed SET EMULATION subcommand.  Removed
6570         compatibility code.
6571
6572         * sysfile-info.c: (cmd_display) Removed compatibility code.
6573
6574         * tokens.h: Comment fixes.
6575         (token types enum) Removed `toktype' typedef name for this int
6576         type.  Removed SUBST.  Restructured.
6577
6578         * vars-atr.c: (discard_variables) Sets n_lag to 0.
6579
6580         * vars-prs.c: Comment fix.
6581
6582         * vfm.c: Comment fixes.
6583         (glob var n_lag) New var.
6584         (static vars lag_count, lag_head, lag_queue) New vars.
6585         (procedure) Removed argument nlag.
6586         (setup_lag) New function.
6587         (close_active_file) Discards lagging state.
6588         (lag_case) New function.
6589         (lagged_case) New function.
6590         (write_case) Lags a case if lagging.
6591
6592         * weight.c: (cmd_weight) Removed compatibility code.
6593         
6594 Sun Aug 17 22:34:40 1997  Ben Pfaff  <blp@gnu.org>
6595
6596         * getline.h: (struct getl_script) New members loop_index, macros.
6597
6598         * getline.c: (getl_add_file) Sets first_line field to NULL.
6599         (getl_add_DO_REPEAT_file) New function.
6600         (handle_line_buffer) When the current line's length is negative,
6601         set the filename and line number.  Increment line number after
6602         reading line.  Pass the line to
6603         copy_with_DO_REPEAT_substitutions() for processing.
6604         (getl_close_file) Free DO REPEAT lines before freeing the
6605         filename, and just set the filename to NULL when doing this,
6606         because otherwise the filename gets freed twice.
6607
6608         * glob.c: (glob var queuing) Removed.  All references removed.
6609
6610         * lexer.c: Comment fixes.
6611         (get_token_representation) New function.
6612
6613         * repeat.c: Comment fixes.
6614         (struct repeat_entry) Replaced type and v union members with a
6615         simple string.
6616         (append_record) New function.
6617         (internal_cmd_do_repeat) Started reforming it for the new
6618         repeat_entry struct.  Properly records filename changes in the
6619         getl_line_buf.  Fixed improper use of = for ==.  Fixed sense of
6620         strncasecmp() result usage.  Uses append_record() to simplify.
6621         Properly discards END REPEAT line.  Calls getl_add_DO_REPEAT_file
6622         to add in the file.
6623
6624         (copy_with_DO_REPEAT_substitutions) Started coding.
6625
6626         [DEBUGGING] (debug_print_lines) New function.
6627
6628         * set.q: (custom_results, internal_cmd_set) s/VER_PCP40/VER_PC/;
6629
6630         * tokens.h: (macro is_id1, is_idn) New macros.
6631
6632 Sat Aug 16 10:57:41 1997  Ben Pfaff  <blp@gnu.org>
6633
6634         * cmdline.c: (static var pre_syntax_message) Changed `win'
6635         compatibility mode to `wnd'.
6636
6637         * data-list.c: (fixed_parse_spss) Renamed
6638         fixed_parse_compatible().
6639
6640         * glob.c: (init_glob) Excise unused code for
6641         program_invocation_short_name.
6642
6643         * lexer.c: (preprocess_line) Leading indentors are ignored in Wnd
6644         as well as in X.
6645
6646         * print.c: (fixed_parse_spss) Renamed fixed_parse_compatible().
6647
6648         * set.q: `win' compatibility renamed `wnd'.
6649
6650 Thu Aug 14 22:11:12 1997  Ben Pfaff  <blp@gnu.org>
6651
6652         * filename.c: [__WIN32__] Change the included Windows header files
6653         (again).
6654         (absolute_filename_p) [__MSDOS__] A filename with a colon as the
6655         second character is absolute.
6656         (dirname) Fix logic error.  Don't printf() the results.
6657         (prepend_dir) Don't printf() the results.
6658
6659         * getline.c: (handle_line_buffer) New function.
6660         (getl_read_line) Reads line with handle_line_buffer() when
6661         appropriate.
6662         (getl_close_file) Discard line buffer data.
6663
6664         * getline.h: Comment fixes.
6665         (struct getl_line_list) New struct.
6666         (getl_script_struct) Added line buffer members.  These are hooks
6667         for use by DO REPEAT to allow it to insert virtual source code
6668         into the program.
6669
6670         * glob.c: (init_glob) [__DJGPP__ || (__WIN32__ && __BORLANDC__)]
6671         Override Borland C++ stupidity that claims Windows has a console
6672         window size of 0x3.
6673
6674         * repeat.c: This is in the process of being restructured from
6675         using a token-buffering approach to the DO REPEAT facility to
6676         using the more flexible approach of a line-buffering approach in
6677         conjunction with the getline module.  Comment fixes.
6678         (struct tok_struct) Removed.
6679         (static vars queue_index, queue_head, queue) Removed.
6680         (static vars line_buf_head, line_buf_tail) New vars.
6681         (internal_cmd_do_repeat) Instead of queuing tokens, queue lines.
6682         Not complete.
6683         (pull_queue, destroy_queue) Removed.
6684         [DEBUGGING] (debug_print_tokens) Removed.
6685
6686 Tue Aug  5 13:57:58 1997  Ben Pfaff  <blp@gnu.org>
6687
6688         * file-handle.q: (prepend_current_directory) New function.
6689         (internal_cmd_file_handle, fh_get_handle_by_filename) Prepends
6690         current directory before normalizing filename.
6691
6692         * filename.c: (gnu_getcwd) New function.
6693         (absolute_filename_p) New function.
6694         (search_path) New argument, PREPEND.  All references changed to
6695         pass NULL except those explicitly mentioned.  Uses
6696         absolute_filename_p().  Prepends PREPEND before trying the
6697         filename.
6698         (dirname, prepend_dir) New functions.
6699
6700         * getline.c: (getl_get_current_directory) New function.
6701         (getl_include) Passes getl_get_current_directory() as PREPEND arg
6702         to search_path().
6703                 
6704 Sun Aug  3 11:42:36 1997  Ben Pfaff  <blp@gnu.org>
6705
6706         * In several source files, the term `script' was replaced with
6707         `syntax file' inside error messages.  Usage of the term `script'
6708         in the sense of a syntax file is now deprecated.
6709
6710         * cmdline.c: (static vars pre_syntax_message, post_syntax_message)
6711         Updated messages.
6712
6713         * dump-sysfile.c: (usage) Update message.
6714
6715         * getline.c: (getl_read_line) Ignore lines beginning with `#!'.
6716
6717         * getline.h: (glob var getl_include_path) Declare extern.
6718
6719         * list.q: Define EXTERN as extern before #including somP.h.
6720
6721         * var.h: Remove declaration of `disptype' variable.
6722
6723         * vfm.c: (close_active_file) After switching the data sink to a
6724         data source, set vfm_sink to NULL, because it doesn't exist any
6725         more.
6726
6727 Thu Jul 17 21:41:44 1997  Ben Pfaff  <blp@gnu.org>
6728
6729         * glob.c: [__BORLANDC__] Include math.h.  Define _matherr() and
6730         _matherrl() to ignore all math errors.
6731
6732         * sfm-read.c: (read_value_labels) When reading the labels from
6733         disk, read the little parts separately instead of as a struct;
6734         this avoids alignment problems.
6735
6736         * sfm-write.c: (struct sfm_fhuser_ext) New member `elem_type'.
6737         (sfm_write_dictionary) Sets elem_type and frees it on lossage.
6738         (write_header) Allocates and initializes elem_type.
6739         (sfm_write_case) Uses elem_type to determine how to handle each
6740         flt64 element.
6741         (sfm_close) Frees elem_type.
6742
6743         * sfmP.h: Comment fix.
6744         [__BORLANDC__] Uses #pragma -a to adjust structure member
6745         alignment.
6746         
6747 Thu Jul 17 01:55:12 1997  Ben Pfaff  <blp@gnu.org>
6748
6749         * Makefile.am: (fiasco_SOURCES) Remove display.c.
6750
6751         * common.c: Fix typo.
6752
6753         * dfm.c: (read_record) Remove strncasecmp() emulation and fix the
6754         sense of the condition.
6755
6756         * expr-evl.c: (macro ALLOC_STRING_SPACE) [!PAGED_STACK] Add
6757         line-continuation backslash.
6758
6759         * filename.c: [__WIN32__] Include <windef.h> before <winbase.h>.
6760
6761         * frequencies.q: (custom_grouped, add_percentile) Don't use a
6762         non-constant expression as an argument to sizeof.
6763
6764         * glob.c: [__WIN32__ && __BORLANDC__] When including <conio.h>,
6765         undefine gettext macro because that's a conio function.
6766
6767         * hash.h: (hsh_prime_tab declaration) Remove.
6768
6769         * list.q: (write_fallback_headers) Move `leader' allocation out of
6770         main loop.  Change to local_alloc() allocation.
6771
6772         * output.h: Formatting fixes.  Put __attribute__ in right place on
6773         function prototypes.
6774
6775         * sfm-read.c: (read_machine_flt64_info, read_variables) Change
6776         incorrect `SECOND_LOWEST_VALUE' references to proper
6777         `second_lowest_value'.
6778
6779         * som-frnt.c: (EXTERN macro) Define as `extern' instead of null
6780         value.  This way 2 out of 3 of the som files define the vars
6781         extern, the correct way, that actually works under BC++.
6782         (som_set_float) Don't use nonconstant initializers for a struct.
6783
6784         * som-high.c: Add the standard alloca() header.
6785         (replicate_table) Add prototype.
6786
6787         Merged DISPLAY routine.
6788         * sysfile-info.c: (AS_*) New enum series.
6789         (cmd_sysfile_info) Gutted.  Calls describe_variable() to do the
6790         dirty work.
6791         (cmd_display, display_macros, display_documents,
6792         display_variables) Stolen from defunct display.c.
6793         (describe_variable) New function.
6794
6795         * temporary.c: [0] (display_tree) New debug function.
6796         (copy_variable) Performs shallow copy of value labels instead of
6797         deep copy; i.e., just copys the AVL tree and increments the
6798         reference counts.
6799
6800         * val-labs.c: Comment fixes.
6801         (do_value_labels) Optionally skip leading forward slash.
6802         (get_label) Creates only a single value label instead of many
6803         copies of one, and sets the reference count.
6804
6805         * display.c: Removed.
6806
6807         * dump-sysfile.c: New file, not yet complete.
6808
6809 Fri Jul 11 23:02:18 1997  Ben Pfaff  <blp@gnu.org>
6810
6811         For lots of source files I added more verbose_msg's.  These aren't
6812         listed below as they have tested as being benign.  In some cases
6813         these replaced debug_printf() calls.
6814
6815         * output.c: (outp_read_devices) Message fix.
6816
6817         * postscript.c: (output_encodings) Message fix.  Reports errors on
6818         fclose().
6819         (postopen) Message fix.
6820         
6821 Fri Jul 11 14:09:40 1997  Ben Pfaff  <blp@gnu.org>
6822
6823         * dfm.c: (dfm_close) Don't call fclose() for a NULL FILE.
6824
6825         * filename.c: (close_file_ext) Set f->file to NULL *after* closing
6826         it.
6827
6828         * main.c: Remove <malloc.h> #include.
6829
6830         * mis-val.c: (parse_numeric) Set .f member for each missing[]
6831         instead of trying to just set the missing[] itself, which is a
6832         gcc-specific idiom.
6833
6834         * sfm-read.c: (read_variables) Same.
6835
6836         * str.h: Add memmem() prototype.
6837
6838         * val-labs.c, var-labs.c: Replace <malloc.h> with <stdlib.h>.
6839
6840 Thu Jul 10 22:13:53 1997  Ben Pfaff  <blp@gnu.org>
6841
6842         * Makefile.am: (q2c) Don't include any libraries in the link.
6843
6844         * dfm.c: (force_line_buffer_extension) New macro.
6845         (count_tabs) New function.
6846         (tabs_To_spaces) New function.
6847         (read_record) Calls tabs_to_spaces() on the line being processed.
6848
6849         * q2c.c: Disabled i18n for this proglet so that libintl.a doesn't
6850         have to be compiled twice (once for CC, once for LOCAL_CC).
6851  
6852 Sun Jul  6 19:14:33 1997  Ben Pfaff  <blp@gnu.org>
6853
6854         * Makefile.am: (INCLUDES) Add intl directory; fix directories.
6855         (LDADD) Add @INTLLIBS@.
6856         (q2c) Add LIBS, @INTLLIBS@ to link step.
6857
6858         * inpt-pgm.c: Turn off debugging.
6859
6860         * postscript.c: (postopen) Format fix.  local_free() blocks
6861         returned by local_alloc(); don't free() them.
6862
6863 Sat Jul  5 23:44:51 1997  Ben Pfaff  <blp@gnu.org>
6864
6865         * data-in.c: (parse_string_as_format) Comment fix.  Fix check for
6866         string length.
6867
6868         * data-list.c: (read_from_data_list_fixed) Pass proper value for
6869         LEN arg, not simply the full string length.
6870
6871         * sort.c: (allocate_file_handles) Check SPSS compatible temp file
6872         directories before generic temp file directories.
6873
6874         * vfm.c: Disable debugging.
6875
6876 Fri Jul  4 13:26:41 1997  Ben Pfaff  <blp@gnu.org>
6877
6878         * get.c: Comment fix.
6879         (cmd_save_internal) Always passes GTSV_OPT_SAVE option.
6880
6881 Wed Jun 25 22:52:28 1997  Ben Pfaff  <blp@gnu.org>
6882
6883         * expr-prs.c: (debug_print_postfix) Conditionally included on
6884         GLOBAL_DEBUGGING.  Removed out_header() reference.
6885
6886         * exprP.h: Removed #undef GLOBAL_DEBUGGING.
6887
6888 Sun Jun 22 22:00:28 1997  Ben Pfaff  <blp@gnu.org>
6889
6890         * ascii.c: Removed obsolete ascii_close_page() prototype.
6891
6892         * command.c: (output_line) Comment fix.
6893
6894         * data-in.c: Formatting fix.
6895         (parse_string_as_format) Now the `fc' argument is used only for
6896         the purpose of error messages; it is not an index into the string
6897         passed.  All references changed.
6898
6899         * data-list.c: Comment fix.
6900         (cut_field) Comment fix.  Now returns the column number of the
6901         position of the field cut out on success.
6902         (parse_field) Added `column' argument.  Puts the column numbers in
6903         the error message.
6904         (read_from_data_list_free, read_from_data_list_list) Record the
6905         column number returned by cut_field(), pass it to parse_field().
6906
6907         * dfm.c: Comment fix.
6908
6909         * do-ifP.h: Comment fix.
6910
6911         * expr-prs.c: (SYSMIS_func) Implemented string-type arguments for
6912         the SYSMIS function.
6913
6914         * expr.h, exprP.h: Comment fix.
6915
6916         * glob.c: (init_glob) Only calls setlocale() and family if
6917         ENABLE_NLS set.
6918
6919         * hash.h: Comment fix.
6920
6921         * include.c: Comment fix.
6922
6923         * output.c: Comment fix.
6924
6925         * postscript.c: (ps_line_intersection) Simplified assertion.
6926
6927         * repeat.c: Comment fix.
6928
6929         * vars-atr.c: Comment fix.
6930
6931         * vars-prs.c: Comment fix.
6932
6933         * vfm.c: (vector_initialization) [DEBUGGING] Fixed undefined
6934         behavior with usage of postincrement.
6935         (memory_stream_read) Discards cases as it goes. 
6936
6937 Sun Jun 15 16:45:17 1997  Ben Pfaff  <blp@gnu.org>
6938
6939         * Makefile.am: Cleans q2c, not just distcleans it.  Distcleans
6940         foo.
6941
6942         * Most source files: Includes debug-print.h, related comment
6943         fixes.
6944
6945         * cases.c: (alloc_val) Removed complex allocation code.  Merely
6946         increments default_dict.nval and returns the former value.
6947         (envector, devector) Removed references to lv member of struct
6948         variable.
6949
6950         * common.h: (macro VME) Replaced complex definition with simple
6951         one.
6952
6953         * data-list.c: (cmd_data_list) Sets vfm_source instead of
6954         read_active_file and cancel_input_pgm.
6955         (read_from_data_list, cancel_data_list) Removed.
6956         (data_list_source_read, data_list_source_destroy_source) New
6957         functions.
6958         (glob var data_list_source) New var.
6959
6960         * dfm.c: (open_file_r, open_file_w) Simplified debug output.
6961         (cmd_begin_data) Improved criteria for an input program accessing
6962         the inline file.  Still not perfect.
6963
6964         * do-if.c: (do_if_trns_proc) Simplified debug output.
6965
6966         * expr-prs.c: Comment fixes.
6967         [DEBUGGING] (debug_print_postfix) Simplified debug output.
6968
6969         * file-handle.q: (fh_close_handle) Simplified debug output.
6970
6971         * file-type.c: Comment fixes.
6972         (cmd_file_type) Sets vfm_source instead of read_active_file and
6973         cancel_input_pgm.
6974         (cmd_end_file_type) On failure, discards variables in place of
6975         just canceling the input program.
6976         (read_from_file_type) Renamed file_type_source_read.
6977         (cancel_file_type) Renamed file_type_source_destroy_source.
6978         (glob var file_type_source) New var.
6979
6980         * get.c: (GTSV_* enum series) New enums GTSV_OPT_SAVE, GTSV_NONE.
6981         (cmd_get) Initializes options to GTSV_NONE before passing to
6982         trim_dictionary().  Removed `lv' reference.  Sets vfm_source
6983         instead of read_active_file and cancel_input_pgm.
6984         (cmd_save_internal) Initializes options before passing to
6985         trim_dictionary().  Local var `nval' removed.
6986         (dict_delete_run) Comment fixes.
6987         (trim_dictionary) Comment fixes.  Disallows scratch variables if
6988         GTSV_OPT_SAVE set in options.
6989         (read_from_get) Renamed get_source_read.
6990         (cancel_get) Renamed get_source_destroy_source.
6991         (glob var get_source) New var.
6992
6993         * inpt-pgm.c: (cmd_input_program) Sets vfm_source instead of
6994         read_active_file and cancel_input_pgm.
6995         (read_from_input_program) Renamed input_program_source_read.
6996         Simplified debug output.
6997         (cancel_input_program) Renamed
6998         input_program_source_destroy_source.
6999         (glob var input_program_source) New var.
7000
7001         * loop.c: (loop_1_trns_proc) Simplified debug output.
7002
7003         * main.c: (dump_token) Made eof output more explicit.
7004
7005         * sfm-read.c: (read_variables, dump_dictionary) Removed `lv'
7006         references.
7007
7008         * sort.c: (cmd_sort_cases) Disallows scratch variables.  Removed
7009         code for always-memory or always-disk cases.  malloc's case-list
7010         based on vfm_source_info.ncases.  Explicit support for
7011         memory_stream via memory_source_cases.
7012         (do_external_sort) Sets vfm_source instead of read_active_file and
7013         cancel_input_pgm.
7014         (allocate_file_handles) The temporary directory permissions are
7015         set to 0700 instead of 0777.
7016         (allocate_cases) Formatting fixes.  Simplified debug output.
7017         (output_record) Compacts the case if necessary before writing it
7018         out.
7019         (close_handle, open_handle_w) Simplified debug output.
7020         (write_initial_runs) Destroys vfm_sink, then sets it to
7021         sort_stream.  Writes records to memory based on
7022         vfm_sink_info.case_size.
7023         (write_to_sort_cases) Renamed sort_stream_write().
7024         (merge) Simplified error handling.  Simplified debug output.
7025         Formatting fixes.
7026         (read_from_external_sort) Renamed sort_stream_read().
7027         Reads records based on vfm_source_info.case_size.
7028         (sort_stream_write) Writes records to memory based on
7029         vfm_sink_info.case_size.
7030         (sort_stream_mode) New function.
7031         (glob var sort_stream) New variable.
7032
7033         * temporary.c: (cmd_temporary) Simplified debug output.
7034         (copy_variable) Removed references to `lv'.
7035
7036         * title.c: (get_title) Simplified debug output.
7037
7038         * var.h: Comment fixes.
7039         (struct get_proc) Removed member `lv'.
7040         (struct variable) Removed member `lv'.  Comment fixes.
7041         (glob vars read_active_file, write_active_file, cancel_input_pgm)
7042         Removed.
7043         (struct case_stream) New.
7044
7045         * vars-atr.c: (discard_variables) Changed cancel_input_pgm,
7046         read_active_file references to use vfm_source.
7047         (init_variable, replace_variable) Removed references to `lv'.
7048
7049         * vfm.c: Comment fixes.
7050         (glob var vfm_source, vfm_sink, vfm_source_info, vfm_sink_info)
7051         New variables.
7052         (static var queue, qh, qt, n_lag) Removed.  All references
7053         removed.
7054         (glob var compaction_necessary, compaction_nval, compaction_case,
7055         paging) New variables.
7056         (record_case) Removed.
7057         (procedure) Comment fixes.  Calls vfm_source->read() instead of
7058         read_active_file().
7059         (lag) Removed.
7060         (prepare_for_writing, arrange_compaction, make_temp_case,
7061         vector_initialization, setup_filter) New function.
7062         (open_active_file) Most of the code moved into the abovementioned
7063         new functions.  Now sets temp_dict to &default_dict if there is no
7064         temporary dictionary, for convenience.  New debug output.
7065         (close_active_file) Deals with changing the sink to the source.
7066         Calls finish_compaction().  Frees compaction_case.  Mostly
7067         rewritten.
7068         (glob vars disk_source_file, disk_sink_file) New vars.
7069         (destroy_active_file, read_from_memory) Removed.
7070         (disk_stream_init, disk_stream_read, disk_stream_write,
7071         disk_stream_mode, disk_stream_destroy_source,
7072         disk_stream_destroy_sink) New functions.
7073         (glob var vfm_disk_stream) New var.
7074         (glob vars memory_source_cases, memory_sink_cases,
7075         memory_sink_iter, memory_sink_max_cases) New vars.
7076         (memory_stream_init, memory_stream_read, memory_stream_write,
7077         memory_stream_mode, memory_stream_destroy_source,
7078         memory_stream_destroy_sink) New functions.
7079         (glob var vfm_memory_stream) New var.
7080         (write_case) Local var `i' renamed `cur_trns'; local var `retval'
7081         named `more_cases'.  Simplified debug output.  Otherwise mostly
7082         rewritten.
7083         (record_case) Moved into the stream drivers.  Removed.
7084         (transform) Removed (was dead code).
7085         (SPLIT_FILE_procfunc) s/vfm_replacement/vfm_sink_info/.  In the
7086         common case that the splits don't change, we don't need to copy
7087         the case into prev_case again--pointless.
7088         (compact_case) New function.
7089         (finish_compaction) New function.
7090
7091         * vfmP.h: Comment fixes.
7092         (DEV_* enum series) Removed. 
7093         (struct storage) Renamed `stream_info'.  Removed variant record.
7094         Removed `device' member.
7095
7096         * debug-print.h: New file.
7097         
7098 Sun Jun  8 01:12:38 1997  Ben Pfaff  <blp@gnu.org>
7099
7100         * autorecode.c: Turned off debugging.
7101
7102         * data-list.c: (destroy_dls) Closes the associated file handle.
7103
7104         * descript.q: (custom_variables) Added PV_NO_SCRATCH to
7105         parse_variables() options.
7106
7107         * dfm.c: (open_file_r) Removed gratuituous argument to msg() call.
7108
7109         * display.c: (display_variables) Really fixed null cell bug.
7110
7111         * file-handle.q: (fh_close_handle) Changed debugging message.
7112
7113         * frequencies.q: (custom_variables) Added PV_NO_SCRATCH to
7114         parse_variables() options.
7115
7116         * list.q: Added PV_NO_SCRATCH in q2c varlist options.
7117         (cmd_list) Fails if no variables specified.
7118         (determine_layout) Writes blank lines manually.
7119
7120         * loop.c: (loop_1_trns_proc) Made debugging code only print
7121         messages if debugging.
7122
7123         * q2c.c: (dump_subcommand) Appends sbc->message to SBC_VARLIST
7124         parse_variables() arguments.
7125         (main) Parses optional parenthesized options to varlist
7126         subcommands into sbc->message.
7127
7128         * sfm-read.c: Format fix.
7129
7130         * var.h: (FV_*) New enum series.
7131         (PV_*) New enum PV_NO_SCRATCH.
7132
7133         * vars-prs.c: (find_var) Removed.
7134         (fill_all_vars) Takes FV_* enum instead of boolean third
7135         argument.  Rewritten to deal with scratch as well as system
7136         variables.
7137         (parse_variables) Error message on scratch variable if
7138         PV_NO_SCRATCH set.
7139
7140         * vfm.c: (static var virt_begin_func) New var.
7141         (procedure) Sets up virt_begin_func.
7142         (SPLIT_FILE_procfunc) For the first case, calls virt_begin_func()
7143         after dump_splits().  For succeeding groups changes, calls
7144         virt_begin_func() instead of begin_func().      
7145
7146 Fri Jun  6 22:42:23 1997  Ben Pfaff  <blp@gnu.org>
7147
7148         * count.c, data-out.c, file-handle.q, list.q, loop.c: Turned off
7149         debugging.
7150
7151         * dfm.c: Added some debugging messages, disabled by default.
7152         (open_file_r) Fixed error message.
7153         (read_record) On eof on inline_file, instead of calling
7154         fh_close_handle(), simply jump to eof label like a normal file.
7155         Message fixes.
7156
7157         * display.c: Thin lines between rows for certain kinds of
7158         listing.  Fixed `null cell' bug.
7159
7160         * error.c: (failure) Flush stdout, stderr before failing.
7161
7162         * file-handle.q: (fh_close_handle) Added debugging message.
7163
7164         * frequencies.q: (dump_full) Bottom line extends across entire
7165         table width.  Changed title formatting.
7166         (dump_condensed) Changed title formatting.
7167         (dump_statistics) Fixed title formatting.
7168
7169         * glob.c: (init_glob) Moved initialization of cur_proc out of #if.
7170         Sets default value of set_format.
7171
7172         * list.q: (cmd_list) Calls blank_line() before determine_layout().
7173         Passes write_all_headers() to procedure() as pre-group func.
7174         (write_all_headers) New function.
7175         (determine_layout) Removed calls to write_header().
7176         Calls blank_line() before and after write_fallback_headers().
7177
7178         * recode.c: (recode_trns_free) Only attempts to free head->map if
7179         non-NULL.
7180
7181         * sfm-read.c: (read_variables) Allows `#' at beginning of system
7182         file variable names but gives a warning.  Sets `left' based on
7183         first character being/not being `#'.  On lossage frees dict->var.
7184
7185         * som-high.c: (som_draw_title) Simplified title formatting.
7186
7187         * vfm.c: (dump_splits) Fixed and changed splits formatting.
7188
7189 Thu Jun  5 22:51:15 1997  Ben Pfaff  <blp@gnu.org>
7190
7191         * autorecode.c: (cmd_autorecode) Sets h_trans to NULL at
7192         beginning.  Frees v_src, v_dest on successful exit.  Frees
7193         h_trans[*], h_trans on lossage.
7194         (recode) Frees h_trans[*], h_trans.
7195
7196         * dfm.c: (dfm_close) Formatting change.
7197         (open_inline_file) Now passed a dfm_fhuser_ext to initialize; no
7198         longer allocates its own in inline_file.
7199         (open_file_r) Passes the local dfm_fhuser_ext to
7200         open_inline_file().
7201         (open_file_w) Message fix. 
7202         (read_record) Buffer reallocation strategy changed.  Frees
7203         ext->line even in inline_file to prevent leaks.
7204         (dfm_put_record) Fixed bug where `ext' was cached before the file
7205         was opened and thus it would be NULL when the file really was
7206         open.
7207         (cmd_begin_data) Sets up inline_file basics itself, then calls
7208         open_inline_file() for the dfm_fhuser_ext.  Formatting fix.
7209
7210         * list.q: (write_line) Formatting fix.
7211         (clean_up) Minor strategy change.  Sets proportional font after
7212         finishing cleanup.
7213         (determine_layout) Sets fixed font before writing regular headers,
7214         or after writing fallback headers.
7215
7216         * modify-vars.c: (cmd_modify_vars) Frees variable lists for DROP
7217         and KEEP vars after using them.
7218
7219         * postscript.c: (ps_init_driver) Frees x->family.
7220         (postopen) When loading fonts, free the temporary font name buffer
7221         after using it.
7222         (ps_text_set_font_by_position) Free temporary font name buffer
7223         after using it.
7224         (text) Fixed code that calculated `lig' so that `lig' always gets
7225         initialized.  Formatting fix.
7226
7227         * som-low.c: (get_cell_size, som_get_table_size) `prop_height' ->
7228         `font_height'.
7229         [GLOBAL_DEBUGGIGN] (check_table) Use arena_alloc() to allocate
7230         cells, not xmalloc(), so that the cells will get destroyed
7231         automatically.
7232
7233         * sysfile-info.c: (cmd_sysfile_info) Frees the dictionary after
7234         using it.
7235
7236 Tue Jun  3 23:33:22 1997  Ben Pfaff  <blp@gnu.org>
7237
7238         * ascii.c: (ascii_text_draw) Always sets metrics for strings that
7239         are drawn.
7240
7241         * dfm.c: Comment fix.
7242
7243         * list.q: Comment fixes.  Include somP.h.  Removed static vars
7244         table, n_columns, n_rows, part.  New struct list_ext.  New static
7245         var line_buf.
7246         (n_lines_remaining, n_chars_width, write_line) New functions.
7247         (cmd_list, list_cases) Rewritten.
7248         (begin_row, end_row, flush_table) Removed.
7249         (write_header, clean_up, write_varname, write_fallback_headers,
7250         determine_layout) New functions.
7251
7252         * output.c: (outp_iterate_enabled_drivers) Minor reformat.
7253
7254         * output.h: Comment fix.
7255
7256         * postscript.c: Comment fix.
7257         (struct ps_driver_ext) Removed prop_size, fixed_size members;
7258         added font_size.  All references changed.
7259         (ps_init_driver) Initializes font_size.  Simplified space checking
7260         code.
7261         (static var option_tab[]) Removed prop-size, fixed-size; added
7262         font-size.
7263         (ps_option) Handles font_size.
7264
7265         * som-high.c: Moved prototypes into somP.h.
7266         (som_init_driver) New function.
7267         (som_submit_table) Moved some code into new function
7268         som_init_driver().
7269         (build_target) Moved some code into new function
7270         som_internal_eject_page().
7271         (som_eject_page) Uses som_internal_eject_page().
7272         (som_internal_eject_page) New function.
7273
7274         * som-low.c: Moved prototypes into somP.h.
7275
7276         * som.h: Formatting fixes.
7277
7278         * somP.h: (struct som_driver_ext) Removed em_width;
7279         added prop_em_width, fixed_width.
7280
7281 Mon Jun  2 14:25:25 1997  Ben Pfaff  <blp@gnu.org>
7282
7283         * Makefile.am: Added `localedir' definition.  Added
7284         -DLOCALEDIR="..." to DEFS.  Added -I. to INCLUDES.
7285
7286         * ascii.c: (macro draw_line) Fixed capitalization.
7287
7288         * ascii.c, autorecode.c, cases.c, cmdline.c, command.c, common.c,
7289         compute.c, count.c, data-in.c, data-list.c, data-out.c,
7290         descript.q, dfm.c, display.c, do-if.c, error.c, expr-evl.c,
7291         expr-opt.c, expr-prs.c, file-handle.q, file-type.c, filename.c,
7292         formats.c, frequencies.q, get.c, getline.c, glob.c, groff-font.c,
7293         hash.c, heap.c, include.c, inpt-pgm.c, lexer.c, list.q, loop.c,
7294         main.c, mis-val.c, misc.c, modify-vars.c, numeric.c, output.c,
7295         postscript.c, print.c, q2c.c, recode.c, rename-vars.c, repeat.c,
7296         sample.c, sel-if.c, sfm-read.c, sfm-write.c, sfmP.h, som-frnt.c,
7297         som-high.c, som-low.c, sort.c, split-file.c, sysfile-info.c,
7298         temporary.c, title.c, tokens.h, val-labs.c, var-labs.c,
7299         vars-atr.c, vars-prs.c, vector.c, vfm.c, weight.c: Marked strings
7300         for internationlization.
7301
7302         * glob.c: [HAVE_LOCALE_H] Includes locale.h.
7303
7304 Sun Jun  1 23:31:18 1997  Ben Pfaff  <blp@gnu.org>
7305
7306         * do-if.c, sort.c, val-labs.c: Comment fixes.
7307
7308         * glob.c: (init_glob) Uncommented, updated i18n support.
7309         
7310         * arena.c, ascii.c, data-in.c, descript.q, error.c, expr-evl.c,
7311         expr-opt.c, expr-prs.c, filename.c, frequencies.q, groff-font.c,
7312         output.c, postscript.c, sfm-read.c, som-high.c, vars-prs.c: Made
7313         the declarations of macros taking arguments a lot nicer.
7314
7315 Sun Jun  1 17:22:04 1997  Ben Pfaff  <blp@gnu.org>
7316
7317         * error.h: Removed CE, CW aliases for SE, SW.
7318
7319         * q2c.c: Removed explicit streq() definition since it's duplicated
7320         in str.h.
7321         
7322         * approx.h, error.h, font.h, hash.h, misc.h, output.h, somP.h,
7323         stats.h, str.h, tokens.h: Made the declarations of macros taking
7324         arguments a lot nicer-looking of <pinard@iro.umontreal.ca>.
7325         Comment fixes.
7326
7327 Sun Jun  1 12:02:06 1997  Ben Pfaff  <blp@gnu.org>
7328
7329         * cmdline.c: Comment fixes.
7330         (pick_compat) Changed return type to int.  Now, instead of setting
7331         glob var `compat' to the emulation, returns the emulation.  All
7332         references changed.
7333         (parse_command_line) Added terminating null to end of
7334         `long_options' array definition.
7335         (pre_syntax_message) Fixes.
7336         (usage) Shows the default emulation in the syntax message by
7337         calling pick_compat().
7338
7339         * getline.c: (getl_add_include_dir) Separates paths with
7340         PATH_DELIMITER, not DIR_SEPARATOR.
7341
7342         * glob.c: (init_glob) Fixed references to DEFAULT_VER_PCP40,
7343         DEFAULT_VER_WIN61, DEFAULT_VER_X40.
7344
7345         * output.c: (outp_configure_macro) Make earlier definitions for a
7346         particular key override later ones for the same key.
7347         
7348 Fri May 30 19:40:49 1997  Ben Pfaff  <blp@gnu.org>
7349
7350         * ascii.c: Comment fixes.
7351
7352         * output.c: (outp_get_paper_size)
7353         s/STAT_OUTPUT_INIT_FILE/STAT_OUTPUT_PAPERSIZE_FILE/.
7354         
7355 Sun May 25 22:34:07 1997  Ben Pfaff  <blp@gnu.org>
7356
7357         * ascii.c, postscript.c, sfm-read.c, sfm-write.c, sort.c: Include
7358         <errno.h>.  GNU libc 2 enforces this!
7359
7360         * command.c: (parse_cmd) Fixed problem with `else' clause being
7361         paired with wrong `if'.  Comment fix.
7362
7363 Fri May  9 16:53:52 1997  Ben Pfaff  <blp@gnu.org>
7364
7365         * getline.c: [!HAVE_LIBREADLINE] (read_console) Changed
7366         blp_getline() to getline().
7367
7368         * output.c: (outp_eval_dimension) Changed the fix from last time;
7369         there was no variable `a'.
7370
7371         * q2c.c: (get_line) Fixed boundary condition overrun bug.
7372
7373 Mon May  5 21:58:22 1997  Ben Pfaff  <blp@gnu.org>
7374
7375         * output.c: (outp_evaluate_dimension) Fixed handling of negative
7376         numbers having fractional parts.  Added case of a fraction without
7377         a whole-number part.
7378
7379 Fri May  2 22:08:05 1997  Ben Pfaff  <blp@gnu.org>
7380
7381         * ascii.c: (ascii_text_get_font_position) Removed.
7382
7383         * expr.h, exprP.h: Disabled debugging.
7384
7385         * groff-font.c, postscript.c: Changed `groff' to `Groff' in
7386         several places.
7387
7388         * output.h: (struct outp_class_struct) Removed
7389         text_get_font_position method.  All references deleted.
7390
7391         * postscript.c: Big change here.  Fontmaps were completely
7392         eliminated because of a change in philosophy.  Comment fixes.
7393         (struct ps_fontmap, ps2dit_map, font_family, dit2family_map)
7394         Removed.
7395         (struct ps_driver_ext) `position', `fontmap', `prop_name',
7396         `fixed_name' members removed.  New members `prop_family',
7397         `fixed_family'.  `family' member changed to type char *.
7398         (static var ps_fontmaps) Removed.
7399         () Removed.
7400         (ps_init_driver) Removed obsolete references, updated.
7401         Initializes `translate_x', `translate_y', `scale'.  Doesn't read
7402         fontmap, of course.  Refers to font names through internal_name
7403         rather than subversive means.  Frees proper items.
7404         (static var option_tab[]) Removed `fontmap-file' option; renamed
7405         `fixed-font', `prop-font'.
7406         (ps_option) Corresponds to option_tab[].
7407         (read_fontmap, release_fontmap, ps_to_dit, compare_ps2dit,
7408         hash_ps2dit, compare_dit2family, hash_dit2family, compare_family,
7409         hash_family) Removed.
7410         (postopen) Generates font names from family names.  Gets
7411         PostScript font name properly.  New prologue file comment `!!!'
7412         style.
7413         (ps_open_page) Adds translate_x, translate_y to BP prologue
7414         function; gives SF argument floating-point format.
7415         (ps_text_set_font_by_name) Doesn't try to map PostScript->Groff
7416         font name.  Doesn't change font family.
7417         (ps_text_set_font_by_position) Generates Groff font name from font
7418         family name instead of through table lookup.
7419         (ps_text_set_font_by_family) Renamed `ps_text_set_font_family',
7420         all references changed.  Reduced to simple string assignment.
7421         (ps_get_font_name) Removed.
7422         (ps_get_font_family) Reduced to string return.
7423         (text) Doesn't save `position' since it no longer exists.  Ugly
7424         kluge to save font family--fix soon?
7425         (load_font) Removed PostScript name argument.
7426         
7427 Thu May  1 14:58:59 1997  Ben Pfaff  <blp@gnu.org>
7428
7429         * postscript.c: Comment fix.
7430         (ps_open_page) Puts scale factor in PostScript output.
7431         
7432 Sat Apr 26 11:49:32 1997  Ben Pfaff  <blp@gnu.org>
7433
7434         * Makefile.am: Distcleans q2c.
7435
7436 Wed Apr 23 21:33:48 1997  Ben Pfaff  <blp@gnu.org>
7437
7438         * ascii.c: (delineate) Sets text size even if width is zero.
7439
7440         * command.c: Comment fix.
7441         (static var cmd_table[]) Re-enabled EVALUATE command.
7442         (parse_cmd) Lotsa comment fixes.  Fixed infinite loop in parsing
7443         of comments in script files.  Now more liberal on criteria for
7444         performing a state transition--if *anything* happened correctly,
7445         not just if *everything* happened correctly.
7446
7447         * data-out.c: (convert_F) Comment fix.  Why in the fsck does
7448         Checker segfault on formatting large numbers and why in the fsck
7449         hadn't I noticed this before?
7450
7451         * expr.h, exprP.h: No longer turn off GLOBAL_DEBUGGING.
7452
7453         * list.q: (cmd_list) Commented out the actual output routine
7454         because of various problems.  Probably will abandon the idea of
7455         using the general `crushed tables' for the LIST procedure.
7456
7457         * temporary.c: (restore_dictionary) Sets var_by_name to NULL after
7458         clearing it.  Allocates a new var_by_name dictionary before trying
7459         to add members to it.
7460
7461         * vars-atr.c: [DEBUGGING] (dump_one_var_node) Removed argument
7462         `sib'.  Changed type of `node' argument.
7463         [DEBUGGING] (dump_var_tree) Replaced avlwalk() with
7464         avl_walk_inorder().
7465         (clear_variable) Only dumps the var tree if var_by_name non-NULL.
7466         [DEBUGGING] Only deletes the variable from var_by_name if that var
7467         non-NULL.
7468
7469 Fri Apr 18 16:48:41 1997  Ben Pfaff  <blp@gnu.org>
7470
7471         * Makefile.am: Added include files to SOURCES.  Added
7472         frequencies.q to EXTRA_DIST.  Removed include/ from INCLUDES.  Now
7473         includes rules for q2c.  Added `boast' target.
7474
7475 Fri Apr 18 15:42:22 1997  Ben Pfaff  <blp@gnu.org>
7476
7477         * Makefile.am: Maintainer-clean Makefile.in.
7478         
7479         * Makefile.am: Fixed redundant EXTRA_DIST line.
7480
7481         * ascii.c: Comment fixes.
7482         (ascii_line_vert) Fixed overly aggressive range check.
7483
7484         * display.c: Removed dead code.
7485
7486         * list.q: Turn debugging on.
7487         (flush_table) New debug code.
7488
7489         * sfm-read.c: (read_value_labels) malloc's the structure before
7490         trying to assign to its members.
7491
7492         * sfm-write.c: Comment fix.
7493
7494         * som-high.c: (som_submit_table) Sets som.t and som.d on each call
7495         to output_table().
7496         (output_table) No arguments anymore--gets them through `som'
7497         global.  New debug code.  In crushed tables, now sets `htv' as
7498         well as `hv' to avoid bad confusion later.
7499         (dump_crush_page) New debug code.
7500
7501         * som-low.c: (som_dump_crush_page) New debug code.
7502
7503 Thu Mar 27 01:11:29 1997  Ben Pfaff  <blp@gnu.org>
7504
7505         All source files: Broke long lines into multiple lines.
7506         
7507         * ascii.c: (ascii_close_page) Uses host_system var in place of
7508         HOST_SYSTEM constant.
7509
7510         * cmdline.c: (var syntax_message[]) Broke into
7511         pre_syntax_message[] and post_syntax_message[].
7512         (usage) Outputs both parts, separated by driver list.
7513
7514         * error.h: Fixed broken formatting.
7515
7516         * expr-opt.c: (str_search, str_rsearch) New functions.
7517
7518         * misc.c: (blp_getdelim) Removed.  All references changed to
7519         `getdelim'.
7520         (str_search, str_rsearch) Removed.
7521         (memrmem) New function.
7522
7523         * misc.h: (blp_getline) Removed.  All reference changed to
7524         `getline'.
7525
7526         * stat.h: New file.
7527
7528         * filename.c: Includes "stat.h", not <sys/stat.h>.
7529         (blp_getenv) Uses host_system var instead of HOST_SYSTEM constant.
7530
7531         * output.c: (outp_list_classes) Changed output formatting.
7532
7533         * sfm-write.c: (write_header) Uses host_system var instead of
7534         HOST_SYSTEM constant.
7535         (write_rec_7_34) Extracts version numbers from the version string.
7536         Untested.
7537
7538         * sort.c: Includes "stat.h", not <sys/stat.h>.
7539
7540         * str.c: (strcasecmp) Removed.
7541
7542         * title.c: (cmd_document) Uses host_system var instead of
7543         HOST_SYSTEM constant.
7544
7545         * version.c: Generated on-the-fly by the Makefile instead of being
7546         static.
7547
7548         * str.h: Comment fixes.  Doesn't substitute for missing memmove or
7549         memcpy.
7550         [!HAVE_STRNCASECMP] Declares strncasecmp().
7551
7552         * version.h: Removed stray character.  Comment fixes.
7553         (vars host_system, build_system) New vars.
7554
7555 Mon Mar 24 21:47:31 1997  Ben Pfaff  <blp@gnu.org>
7556
7557         * Most source files: Changed formatting of copyright notice; fixed
7558         FSF address; reformatted to better conform to GNU standards;
7559         comment fixes.  Added markups to prevent GNU indent from messing
7560         up my beautiful formatting :-).
7561         
7562         * q2c.c: (get_line) Ignores lines that begin with `/* *INDENT' so
7563         that GNU indent markups can be passed through without problems.
7564
7565 Wed Feb 19 21:30:31 1997  Ben Pfaff  <blp@gnu.org>
7566
7567         * get.c: Turned off debugging.
7568
7569         * glob.c: (init_glob) Turned on save-file compression by default.
7570
7571         * sfm-write.c: (sfm_write_case) Fixed bug which resulted in less
7572         compression than was possible in save files.
7573
7574 Sun Feb 16 20:57:20 1997  Ben Pfaff  <blp@gnu.org>
7575
7576         * data-out.c: (convert_F) Comment fixes.  Debug message fixes.
7577
7578         * frequencies.q: Removed Fiasco extensions.  Updated calculation
7579         algorithms.  Polished output format. 
7580         (struct frq_info_struct) Removed members `max_degree', `min_n',
7581         all references removed.
7582         (macro frq_extensions) Removed.
7583         (static vars min_n, max_degree) Removed, all references removed.
7584         (internal_cmd_frequencies) Doesn't handle extensions.  Doesn't
7585         calculate `min_n', `max_degree'.
7586         (postcalc) Passes new arg to dump_statistics().
7587         (dump_full) Honor NOLABEL option.  Buggy?  Adds variable name
7588         title.
7589         (dump_condensed) Adds variable name title.
7590         (sum_freqs) Removed.
7591         (calc_stats) Updated calculation algorithm.
7592         (dump_statistics) Removed warning for too-few observations.
7593         Changed table formatting.  Adds variable name title if passed new
7594         arg is nonzero.
7595
7596         * output.h: Comment fix.
7597
7598         * recode.c, sample.c, sort.c: Disabled debug code.
7599
7600         * som-frnt.c: (som_set_value, som_set_float, som_set_text)
7601         Improved debug code.
7602
7603         * var.h: (enum series frq_*) Removed Fiasco extensions.
7604
7605 Sat Feb 15 21:26:53 1997  Ben Pfaff  <blp@gnu.org>
7606
7607         * command.c: Added PROCESS IF to command table.
7608
7609         * Lots & lots of places, removed checks for NULLs preceding calls
7610         to free_expression(), which itself checks.
7611
7612         * descript.q: Removed Fiasco extensions.  Removed optimizations
7613         for non-weighted active files.  Implemented some options.
7614         Finished polishing output format.  Comment fixes.  Merged
7615         `descript.g'.
7616         (static vars n_glob_miss_list, n_glob_valid, n_glob_missing,
7617         max_degree, min_n) Removed.
7618         (macro dsc_extensions) Removed.
7619         (struct dsc_info_struct) Removed `min_n' member, all references
7620         fixed.
7621         (internal_cmd_descriptives) Removed calculation of min_n,
7622         max_degree.  Only deals with one `calc' routine instead of two
7623         flavors.
7624         (precalc) Eliminated redundancy.  Updated for changes to
7625         descriptives_proc structure.
7626         (calc) Moved here from `descript.g'.  Rewritten to calculate
7627         statistics via `moments about the mean' rather than by summing,
7628         summing squares, summing cubes, and so on.
7629         (postcalc) Rewritten for new-style statistical calculation.
7630         (display) Removed support for displaying variables across rows.
7631         No longer crushes the descriptives table.  Removed ancient code.
7632         Added display of N, by variable and listwise.
7633
7634         * descript.g: Removed; merged into `descript.q'.
7635
7636         * expr-evl.c: (evaluate_expression) Now returns a double.  For
7637         numeric results, it returns the result as well as storing it in
7638         the passed `value' structure if non-NULL.  For string results it
7639         just returns 0.0 and it must be passed non-NULL.  Many references
7640         to this function were optimized by use of this change, especially
7641         but not exclusively in `compute.c'.
7642
7643         * frequencies.g: Comment fix.
7644
7645         * glob.c: (glob var process_if_expr) New global var.
7646
7647         * postscript.c: (static var option_tab[]) Corrected entry for
7648         `fixed_size'.
7649         (postopen) Sets x->size to x->prop_size.
7650         (ps_text_set_font_by_name) Sets font size as well as typeface for
7651         PROP and FIXED fonts.
7652         
7653         * sel-if.c: (cmd_process_if) New function.
7654
7655         * sfm-write.c: (struct sfm_fhuser_ext) New member `n_cases'.
7656         (sfm_write_dictionary) Sets `n_cases' to 0.
7657         (sfm_write_case) Increments `n_cases'.
7658         (sfm_close) Attempts to seek the system file back to the header
7659         and write the number of cases in its proper slot.
7660
7661         * som-frnt.c: (som_insert_table) Masks off expansion options since
7662         only SOPT_X_NORM seems to work sensibly.
7663
7664         * som-low.c: (get_cell_size) Fixed bug when a table cell was sized
7665         with a `fixed' value of 2.
7666
7667         * sort.c: (cmd_sort_cases) Cancels PROCESS IF.
7668
7669         * sysfile-info.c: (cmd_sysfile_info) Doesn't display more than 10
7670         value labels; uses SOPT_NONE instead of SOPT_X_BOTH.
7671
7672         * var.h: (enum series dsc_*) Removed Fiasco extensions.
7673         (struct descriptives_proc) Removed `miss_noweight'; new members
7674         `X_bar', `M2', `M3', `M4', `min', `max'.
7675
7676         * vars-atr.c: (discard_variables) Cancels PROCESS IF.
7677
7678         * vfm.c: (close_active_file) Cancels PROCESS IF.
7679         (write_case) Doesn't process cases unselected by PROCESS IF.
7680
7681 Fri Feb 14 23:32:58 1997  Ben Pfaff  <blp@gnu.org>
7682
7683         * glob.c: (glob var err) Removed.
7684
7685         * sysfile-info.c: (cmd_sysfile_info) When adjusting table size,
7686         doesn't have to take into account number of value labels since
7687         they're in a subtable anyway.  Also, doesn't display more than 10
7688         value labels since we can't yet break pages in subtables.
7689
7690 Tue Feb  4 15:15:50 1997  Ben Pfaff  <blp@gnu.org>
7691
7692         * som-frnt.c: (som_change_table_size) Simple change for elegance
7693         that shouldn't change behavior.
7694         (som_set_value) Comment fix.
7695
7696         * som-high.c: (som_submit_table) Message fix.
7697
7698 Wed Jan 22 21:54:00 1997  Ben Pfaff  <blp@gnu.org>
7699
7700         * command.c: Added SYSFILE INFO to command table.
7701
7702         * file-handle.q: (fh_handle_filename) New function.
7703
7704         * get.c: (save_trns_proc) Fixed a bug in padding of output data
7705         with spaces.
7706
7707         * main.c: (parse) New return value for command functions, -3.
7708
7709         * misc.h: Comment fix.
7710
7711         * output.h: Comment fixes.
7712         (macro COMPONENTS) Removed.
7713
7714         * postscript.c: (write_text) Modified literal_chars[] so that `('
7715         and ')' are not written to the output in strings as literals.
7716
7717         * sfm-read.c: (sfm_read_dictionary) New argument.
7718         (read_header) New argument.  Sets the information structure's
7719         values from the header information.  
7720         (read_variables) [__CHECKER__] Redefines isalnum()--some sort of
7721         bizarre Checker problem, I guess.
7722         (read_variables) Proper cleanup on lossage.
7723
7724         * sfm.h: (struct sfm_read_info) New struct for use by
7725         sfm_read_dictionary().
7726
7727         * som-frnt.c: (som_create_table) New argument CREATE_FLAGS,
7728         currently used just for tables that can be dynamically resized and
7729         thus have to be allocated with arena_malloc() instead of
7730         arena_alloc().  All references changed.
7731         (som_change_table_size) New function.
7732         (som_insert_table) Bugfix: now inserts `cell', not `c'!
7733
7734         * som-high.c: [GLOBAL_DEBUGGING] (check_table) Moved to som-low.c.
7735         (som_submit_table) [GLOBAL_DEBUGGING] Doesn't call check_table()
7736         any more.
7737
7738         * som-low.c: (draw_cell) Calls draw_table_cell() for SCON_TABLE
7739         cells.
7740         (draw_intersection) Now takes an argument specifying the table in
7741         question.  All references changed.
7742         (draw_table_cell) New function.
7743         (som_get_table_size) [GLOBAL_DEBUGGING] Calls check_table().
7744         (som_get_table_size) Many nice new explanatory comments.
7745         [GLOBAL_DEBUGGING] (check_table) Moved here from som-high.c.
7746
7747         * som.h: New enum series SOM_CREATE_* for use as create flags with
7748         som_create_table().
7749
7750         * str.h: Moved a comment here from TODO.
7751
7752         * sysfile-info.c: New file.  Reference implementation.
7753
7754 Sun Jan 19 14:22:11 1997  Ben Pfaff  <blp@gnu.org>
7755
7756         * command.c: Added RENAME VARIABLES to table of commands.
7757
7758         * data-in.c: (dls_error) Sets `cust_field'.
7759         (parse_N) Message fix.
7760         (parse_day_count) New function.
7761         (to_roman) Never outputs VX as a `short form' of V.
7762         (parse_month) Fixed parsing of Roman numerals.
7763         (parse_trailer) Message fix.
7764         (parse_DATE, parse_ADATE, parse_EDATE, parse_SDATE, parse_JDATE,
7765         parse_QYR, parse_MOYR, parse_WKYR, parse_DTIME) Issue a message if
7766         the date is invalid.
7767         (parse_SDATE) Fixed swapped day, year.
7768         (parse_JDATE) Fixed bug for dates in 1582.
7769         (parse_DTIME) Allows days not between 1 and 31.
7770         (parse_numeric) Makes local copy of f.type for easier usage.
7771         FMT_DOLLAR fixed.
7772
7773         * data-out.c: (convert_F) When outputting as scientific, properly
7774         sets f.type as fp->type.
7775         (insert_commas) Fixed operator precedence problem with setting of
7776         nitems.  Changed strcpy to memcpy (no null terminator). 
7777         (convert_date) Fixed FMT_JDATE: added 1900 to year.
7778         (convert_CCx) Essentially rewritten, but now it works.
7779
7780         * display.c: (cmd_display) Added DISPLAY FILE LABEL (undocumented
7781         feature of Fiasco).
7782         (display_documents) Implemented.
7783
7784         * error.c: (glob var cust_field) New var.
7785         (vmsg) Displays cust_field as part of message classes DE and DW.
7786
7787         * formats.c: (debug_print) Fixed to compile under updated
7788         dictionary format.
7789
7790         * get.c: (cmd_get, cmd_save_internal) Close file handle on
7791         failure.
7792
7793         * misc.c: (parse_format_specifier) Formatting fix.
7794
7795         * modify-vars.c: (struct var_modification) Renamed `n_reorder' as
7796         `n_rename' for clarity.
7797         (cmd_modify_vars) Initializes `forward' and `positional' at
7798         appropriate times.  Frees lists of vars to rename on failure.
7799         Comment fix.  Frees memory on success.  
7800         (rearrange_dict) Simplified `for' loop condition.
7801
7802         * rename-vars.c: New file (reference implementation).
7803         
7804         * set.q: (internal_cmd_set) Fixed `emu' test condition.
7805
7806         * sfm-read.c: (read_header) File label is created only if file
7807         label in file is not blank.
7808         (read_variables) Initializes `dict' local variable.
7809         (read_documents) Proper behavior on lossage.
7810
7811         * sfm-write.c: (write_header) Doesn't blank out the file label
7812         (why was this here to begin with?!)
7813
7814         * temporary.c: (save_dictionary) File label is copied only if
7815         non-NULL.  Doesn't try to xstrdup() dictionary documents.
7816         Adapted so as to not irritate Checker.
7817         (free_dictionary) Only destroys var_by_name if non-NULL.
7818
7819         * title.c: (cmd_file_label) Doesn't skip FILE, LABEL tokens.
7820         (cmd_document) Doesn't skip DOCUMENT token.  Adds some header
7821         lines to the document, indents the document.  Also, it works now.
7822         (add_document_line) New function.
7823
7824         * var.h: (struct dictionary) Reordering.
7825
7826         * vars-prs.c: (parse_variables) On lossage, only local_free()'s
7827         bits if it was allocated to begin with.
7828
7829 Thu Jan 16 13:08:57 1997  Ben Pfaff  <blp@gnu.org>
7830
7831         * command.c: Added MODIFY VARS to list of commands.
7832
7833         * configure.in: Updated custom macros for autoconf 2.12.  Removed
7834         mmap reference; fixed termcap library reference.
7835
7836         * display.c: (display_variables) Fixed a few bugs although it's
7837         still not well written.
7838
7839         * error.c: [!__CHECKER__] (chkr_disp_call_chain) New function.
7840         (induce_segfault) Calls chkr_disp_call_chain() instead of
7841         inducing an actual SIGSEGV.
7842
7843         * expr-opt.c: (evaluate_tree) Swapped order of arguments to
7844         str_search() and str_rsearch().  Fixed tests for matches on
7845         OP_INDEX and OP_RINDEX.
7846
7847         * filename.c: (good_getcwd) Removed as the new libc for Checker
7848         doesn't contain this bug, apparently.
7849
7850         * misc.c: (str_search, str_rsearch) Changed order of arguments for
7851         consistency with GNU memmem.
7852         (blp_getdelim) Changed `len' from `int' to `size_t'.
7853
7854         * modify-vars.c: Reference implementation.
7855
7856         * som-frnt.c: (zero_length) New global var.
7857         (som_create_table) Message fix.
7858
7859         * som.h: Added gcc attributions to som_set_text(),
7860         som_output_text() prototypes.  blank_line() refers to
7861         zero_length[] instead of a literal null string to suppress gcc
7862         warnings.
7863
7864         * sort.c: (do_external_sort) Fixed fencepost error on lossage.
7865         (allocate_cases) Decrements x_max so the last element of x[] can
7866         be used by the algorithm.
7867
7868         * var.h: Changed minor details of `variable' declaration.  
7869         (struct modify_vars_proc) New struct.
7870         (struct variable) Added field p.mfv.
7871
7872         * vars-atr.c: Comment fix.
7873
7874         * vars-prs.c: (fill_all_vars) More optimal implementation.
7875
7876         * vfm.c: (dump_splits) Sets the last byte of temp_buf to a null
7877         character, which it shouldn't have to do but printf() seems to
7878         read the null byte even though I supply a maximum length...
7879
7880 Fri Jan 10 20:22:08 1997  Ben Pfaff  <blp@gnu.org>
7881
7882         * command.c: Removed command alias X for QUIT.
7883         (parse_cmd) Fixed comment parsing.
7884
7885         * dfm.c: (struct dfm_fhuser_ext) Fields `len', `size' are now of
7886         type size_t.
7887         (read_record) Fixed references to len, size.
7888         (dfm_get_record) Restructured.
7889
7890         * file-handle.h: (struct file_handle) Field `lrecl' now of type
7891         size_t.
7892
7893         * file-handle.q: (internal_cmd_file_handle) Checks for nonpositive
7894         record length.
7895
7896         * modify-vars.c: New file.  Not complete.
7897         
7898         * set.q: (set_ccx) Fixed operator precedence problem regarding ^
7899         and ==.
7900
7901         * sfm-read.c: (bswap_flt64, read_header, write_variable) Fixed
7902         problems caused by int/size_t differences.
7903
7904         * sort.c: (output_record, merge_once) Cast `size_t's to `int's in
7905         appropriate spots.
7906
7907         * str.c: (strcasecmp) Fixed bug that cropped up when the strings
7908         being compared were of equal length.
7909
7910 Thu Jan  2 19:08:23 1997  Ben Pfaff  <blp@gnu.org>
7911
7912         * command.c: Added DOCUMENT, DROP DOCUMENTS, FILE LABEL.
7913
7914         * lexer.c: (get_dotted_rest_of_line) New function.
7915
7916         * sel-if.c: (cmd_filter) Cannot choose string or scratch variables
7917         as filters.
7918
7919         * sfm-read.c: (sfm_read_dictionary) Calls read_documents() to read
7920         type 6 records.  Frees the dictionary properly.
7921         (read_header) Initializes the dictionary instead of letting
7922         read_variables() do it.  Sets the dictionary file label from the
7923         system file.
7924         (read_documents) New function.
7925
7926         * sfm-write.c: (sfm_write_dictionary) Calls write_documents() to
7927         write type 6 record if appropriate.
7928         (write_header) Writes file label from dictionary.
7929         (write_documents) New function.
7930
7931         * temporary.c: (save_dictionary, restore_dictionary,
7932         free_dictionary) Properly handle new fields in dictionary struct.
7933
7934         * title.c: (get_title) Returns after failure().
7935         (cmd_file_label, cmd_document, cmd_drop_documents) New functions
7936         for new commands FILE LABEL, DOCUMENT, DROP DOCUMENTS.  Untested.
7937
7938         * var.h: (struct dictionary) New fields `label', `n_documents',
7939         `documents'.
7940
7941 Wed Jan  1 22:08:10 1997  Ben Pfaff  <blp@gnu.org>
7942
7943         * command.c: Added FILTER to list of commands.
7944
7945         * frequencies.g: [WEIGHTING] Removed test for weighting!=-1 since
7946         it's always true.
7947
7948         * get.c: (cmd_save_internal) Removed weighting code since it's now
7949         handled by sfm-write.c.  Properly commented out debug code.
7950
7951         * glob.c: (glob var weighting) Removed.
7952
7953         * sel-if.c: Comment fixes.
7954         (cmd_filter) New function.
7955
7956         * sfm-read.c: (struct sfm_fhuser_ext) New field `weight_index'.
7957         (sfm_read_dictionary) Sets weighting variable direct in the
7958         created dictionary now.  (Apparently we previously didn't support
7959         weighting on GET?)
7960         (read_header) Sets weight_index field in sfm_fhuser_ext from
7961         header read from disk.
7962
7963         * sfm-write.c: (sfm_write_dictionary) Comment fix.
7964         (write_header) Now sets the weighting in the header from the
7965         passed primary dictionary instead of from the sfm_write_info.
7966
7967         * sfm.h: (struct sfm_write_info) Removed field `weight'.
7968
7969         * som-high.c: (dump_crush_table) Fixed a couple of assertions that
7970         broke on boundary conditions.
7971
7972         * var.h: (struct dictionary) New fields `weight_var',
7973         `weight_index', and `filter_var'.
7974         (glob var weighting) Removed.  This is now part of struct
7975         dictionary.  All references changed; the less mechanical changes
7976         are described above.
7977
7978         * vars-atr.c: (find_dict_variable) New function.
7979
7980         * vfm.c: (static var filter_index) New variable.
7981         (open_active_file) Initializes filter_index from default_dict.
7982         (write_case) Calls proc_func() only if the filter variable is
7983         nonzero; this implements FILTER behavior.
7984
7985         * weight.c: (static var weight_varname) Removed.
7986         (cmd_weight) Modified default_dict instead of glob vars.
7987         (update_weighting) Changed the signature to modify a dictionary
7988         instead of glob vars.  Now returns the weighting variable.
7989         (get_weighting_variable) Removed; its function is absorbed by
7990         update_weighting().
7991         (stop_weighting) Operates on a dictionary now.
7992
7993 Wed Jan  1 17:00:59 1997  Ben Pfaff  <blp@gnu.org>
7994
7995         * sort.c: Removed debugging info from messages.
7996         (do_external_sort) Cleans up after itself by deleting the
7997         temporary directory on failure.  (On success it is deleted by the
7998         input program.)
7999         (allocate_cases) Removed debug code.  Added clean up code.
8000         (output_record) Removed debug code.
8001         (merge) Added code to close all the input files that are currently
8002         open.  This is a likely location for bugs, because I'm not sure
8003         about boundary conditions.  Removed an unnecesary heap_delete().
8004         (merge_once) Removed input file "optimization" that in fact
8005         screwed up the rest of the code.  Message and comment fixes.
8006
8007 Sun Dec 29 21:36:48 1996  Ben Pfaff  <blp@gnu.org>
8008
8009         * error.c: [__CHECKER__] (induce_segfault) Flushes output streams.
8010
8011         * heap.c: (heap_delete) New argument.
8012
8013         * sort.c: Finished implementation of external sort.
8014
8015         * vfm.c: (read_from_disk) Returns after a disk error.
8016
8017 Sun Dec 22 23:10:39 1996  Ben Pfaff  <blp@gnu.org>
8018
8019         * sort.c: (static var state) Removed.
8020         (static vars max_handles, tmp_basename, tmp_extname,
8021         huffman_queue) New variables.
8022         (do_external_sort) Moved most code to new functions.
8023         Creates huffman_queue.
8024         (allocate_file_handles, allocate_cases) New functions.
8025         (static vars run_no, run_length, file_index, case_count) New
8026         variables. 
8027         (output_record) Returns success.  Now really writes to the output
8028         file.
8029         (begin_run, end_run) New functions.
8030         (write_initial_runs) Returns success.  Initializes run_no to -1.
8031         Calls begin_run(), end_run() at appropriate times.  Outputs debug
8032         messages.
8033         (write_to_sort_cases) Calls begin_run(), end_run() at appropriate
8034         times.
8035         (merge) New function.
8036
8037         * heap.c, heap.h: New files.  Hopefully in near-final form.
8038
8039 Sat Dec 21 21:51:04 1996  Ben Pfaff  <blp@gnu.org>
8040
8041         * glob.c: Added write_active_file to global vars.
8042
8043         * sort.c: Several new miscellaneous static variables.
8044         (cmd_sort_cases) Big comment fix.
8045         (perform_case_2) Renamed `do_external_sort' and completely
8046         rewritten.
8047         (case_2_proc_func) Removed.
8048         (output_record, write_initial_runs, write_to_sort_cases,
8049         compare_record) New functions.
8050
8051         * vfm.c: [DEBUGGING] (index_to_varname) Excised bit rot.
8052
8053 Tue Dec 17 18:57:59 1996  Ben Pfaff  <blp@gnu.org>
8054
8055         * sort.c: (perform_case_2) Changed the method for allocation of
8056         lots of memory--now allocates one case at a time in hopes that
8057         more cases can be allocated with heavily fragmented memory.
8058
8059         * var.h: (write_active_file) New global var.
8060
8061         * vfm.c: (procedure, close_active_file, write_case,
8062         SPLIT_FILE_procfunc) Now allow beginfunc, procfunc, and endfunc
8063         arguments to procedure() to be NULL.  All references to
8064         procedure() that made use of dummy functions were changed to NULL
8065         functions.
8066         (open_active_file) If write_active_file is non-NULL, the output
8067         device becomes DEV_PGM (a new enum).
8068         (close_active_file) Sets write_active_file to NULL.
8069         (read_from_memory) Comment fix.
8070         (record_case) Calls write_active_file() when the output device is
8071         DEV_PGM.
8072
8073 Sun Dec 15 15:32:16 1996  Ben Pfaff  <blp@gnu.org>
8074
8075         * sort.c: New file.
8076
8077         * autorecode.c: (cmd_autorecode) Fixed parsing of options.
8078         Fixed checking for duplicate varnames.
8079         (recode) xmalloc()'s the transformation instead of arena_alloc()'ing
8080         it.
8081         (autorecode_trns_free) Destroys hash tables for each recoding
8082         specification.
8083         (autorecode_proc_func) Compares NULL to *vpp instead of vpp.
8084
8085         * command.c: Added SORT CASES to cmd_table.
8086         (null_func, null_int_func) Prototyped.
8087
8088         * descript.g: (calc_weight, calc_noweight) Computes own case
8089         number now.
8090         
8091         * frequencies.q: (dump_statistics) Fixed problem with
8092         too-few-cases warning message.
8093
8094         * get.c: (cmd_save_internal) Handles weighting properly.
8095
8096         * hash.c: (hsh_dump) Output format changed.
8097         (force_hsh_insert) Actually works now, prototype changed.
8098
8099         * list.q: (static var case_num) New variable.
8100         (cmd_list) Initializes case_num.
8101         (list_cases) Increments case_num.
8102
8103         * var.h: Added definitions for SORT CASES.  Comment fixes.
8104
8105         * vfm.c: Some definitions moved to new file vfmP.h.  Comment
8106         fixes.  `active' renamed vfm_active, `rep' renamed
8107         vfm_replacement, all references changed.
8108         (procedure) The procfunc no longer receives a case number.  All
8109         references changed.
8110         (write_case) Subtle reordering.
8111         (SPLIT_FILE_procfunc) Counts cases differently.  Slightly less
8112         redundant.
8113
8114         * weight.c: (get_weighting_variable) New function.
8115
8116         * vfmP.h: New file with definitions from vfm.c.
8117
8118 Sat Dec 14 10:35:30 1996  Ben Pfaff  <blp@gnu.org>
8119
8120         * command.c: (FILE_TYPE_okay) Commented out some tests because
8121         they're clumsy and not yet needed.
8122
8123         * var.h: Most *_trns structures moved to their respective source
8124         files.  Some were moved into a new file, do-ifP.h.  Comment fixes.
8125         (union any_trns) Changed to a typedef for trns_header.
8126         (struct input_program_pgm) Removed.
8127
8128         * vars-prs.c: (parse_variables) Only local_free()'s bits if it
8129         was allocated in the first place.
8130
8131 Fri Dec 13 21:30:53 1996  Ben Pfaff  <blp@gnu.org>
8132
8133         * autorecode.c: New file.
8134         
8135         * command.c: Added AUTORECODE to command table; re-enabled SET.
8136
8137         * data-out.c: (convert_F) Handles infinities and NaNs properly.
8138
8139         * error.c: (vmsg) Comment fixes.
8140
8141         * hash.c: Comment fix.
8142         (hashpjw_d) New function.
8143         (hashpjw) Reimplemented as call to more general function
8144         hashpjw_d().
8145         (internal_comparison_fn) Initializes pointers properly.
8146         (hsh_sort) [GLOBAL_DEBUGGING] New debugging code.
8147         (force_hsh_insert, force_hsh_find) New debugging wrapper
8148         functions.
8149
8150         * main.c: (main) Message fix.
8151
8152         * output.c: (outp_read_devices) Message fix.
8153
8154         * set.q: Comment fixes.
8155         (custom_results) Implemented Wnd/X form of subcommand.
8156         (set_routing) New function.
8157         (internal_cmd_set) Implemented ERRORS, MESSAGES.
8158
8159         * settings.h: (SET_ROUTE_*) New enum series.
8160         (set_results) Renamed set_results_file, all references changed.
8161         (set_messages) Removed.
8162         (glob vars set_errors, set_messages, set_results) New vars.
8163
8164         * title.c: (get_title) Remembers to xstrdup() the result of
8165         get_rest_of_line().
8166
8167         * var.h: (arc_item, arc_spec, autorecode_trns) New structures for
8168         use by AUTORECODE.
8169         (union any_trns) New element `arc'.
8170
8171 Fri Dec  6 23:53:47 1996  Ben Pfaff  <blp@gnu.org>
8172
8173         * command.c: (output_line) Removed references to set_screen.
8174
8175         * error.c: (static var terminating) New var.
8176         (hcf) Sets terminating to 1.
8177         (vmsg) If terminating is nonzero, does not attempt to call hcf().
8178         This prevents an infinite loop if an error occurs within hcf().
8179
8180         * expr-evl.c: (evaluate_expression) [__CHECKER__] Replaced case
8181         statement circumlocution with `case 42000' trick.
8182         (evaluate_expression) New support for OP_STR_MIS.
8183
8184         * expr-opt.c: (evaluate_expression) [__CHECKER__] Replaced case
8185         statement circumlocution with `case 42000' trick.
8186         (dump_node) Handles OP_STR_MIS.
8187
8188         * expr-prs.c: (MISSING_func, SYSMIS_func) Rewrote to handle string
8189         variables exceptions.
8190         (parse_function) Message fix.
8191         (ops[]) Added OP_STR_MIS.
8192
8193         * expr.h: Added OP_STR_MIS to OP_* enum.  Comment fixes.
8194
8195         * exprP.h: [__CHECKER__] Removed case statement circumlocution.
8196
8197         * glob.c: Removed set_scrnfile glob var.
8198         (init_glob) set_errorbreak set to 0 by default.
8199
8200         * groff-font.c: Changed included files.
8201         (groff_read_font) Initializes font_arena local var correctly.
8202         (default_font) New function.
8203
8204         * output.c: Comment fixes.
8205         (glob var disabled_devices) New variable.
8206         [GLOBAL_DEBUGGING] (static var iterating_driver_list) New
8207         variable.
8208         [GLOBAL_DEBUGGING] (reentrancy) New function.
8209         [GLOBAL_DEBUGGING] (outp_read_devices, outp_done, find_driver,
8210         outp_iterate_enabled_drivers) Calls to reentrancy().
8211         (destroy_list) New function.
8212         (outp_done) Moved code to destroy_list().
8213         (parse_options) Parses `listing', `screen', `printer' options
8214         internally.
8215         (configure_driver) Sets new `device' member of driver.
8216         (outp_iterate_enabled_drivers, outp_enable_device) New functions.
8217
8218         * output.h: Comment fixes.  New enum series OUTP_DEV_*.
8219         (struct outp_driver_struct) New member `device'.
8220
8221         * postscript.c: (find_encoding_file) Doesn't display its own error
8222         messages.
8223         (default_encoding) New function.
8224         (switch_font) Calls default_encoding() if no encoding can be
8225         found.
8226         (text) Makes up a character metric if none exists for the desired
8227         character.
8228         (load_font) Properly copies a fallback filename.  Calls
8229         default_font() for a font if none at all are known.
8230
8231         * set.q: Comment fixes.  Removed OUTPUT subcommand.
8232         (custom_listing) Calls outp_enable_device() to enable/disable
8233         listing device.
8234         (turn_screen_on) Removed.
8235         (internal_cmd_set) Calls outp_enable_device() to enable/disable
8236         screen, printer devices.
8237
8238         * settings.h: Comment fixes.
8239         (glob vars set_output, set_printer, set_screen, set_scrnfile)
8240         Removed.
8241
8242         * som-high.c: (som_submit_table, som_eject_page) Use
8243         outp_iterate_enabled_drivers() instead of iterating
8244         outp_driver_list directly.
8245
8246 Wed Dec  4 21:34:17 1996  Ben Pfaff  <blp@gnu.org>
8247
8248         * data-in.c: (parse_EDATE, parse_SDATE) New functions.
8249         (parse_string_as_format) Handles new formats.
8250         (parse_numeric) Now handles DOT and PCT formats.
8251
8252         * data-out.c: (convert_E, convert_F, insert_commas) Handle DOT
8253         format now.
8254         (convert_date) Handle EDATE and SDATE formats.
8255         (convert_CCx) Now if there's not room for the currency characters,
8256         converts it as F format if it's positive instead of giving up
8257         quickly.  Also fixed save-and-restore bug with decimal point
8258         characters.  
8259         (convert_format_to_string) Handles new formats.
8260
8261         * misc.c: (formats[]) Added new formats.
8262         (convert_fmt_ItoO) Supports new formats.
8263
8264         * sfm-read.c: (parse_format_spec) Supports new formats.  Better
8265         data checking.  New argument, all references changed.
8266
8267         * sfm-write.c: (write_format_spec) Supports new formats.
8268
8269         * var.h: New formats FMT_DOT, FMT_PCT, FMT_EDATE, FMT_SDATE.
8270         Comment fixes.
8271
8272 Sun Dec  1 17:19:00 1996  Ben Pfaff  <blp@gnu.org>
8273
8274         * cmdline.c: Comment fixes.
8275         (parse_command_line) Changed return type to void.
8276
8277         * data-in.c: (parse_string_as_format) Added FMT_CCA...FMT_CCE to
8278         switch.
8279         (parse_numeric) Handles international numbers (comma as decimal
8280         point).  Some reformatting.
8281
8282         * data-list.c: (parse_free) Default output format is now
8283         set_format instead of hard-coded F8.2.
8284         (read_from_data_list_list) Emits error message on undefined data
8285         only if set_undefined is nonzero.
8286
8287         * data-out.c: (convert_E) Changes decimal point from period to
8288         comma if appropriate.  Restructured.  Better comments.
8289         (convert_F) Changes decimal point from period to comma if
8290         appropriate.
8291         (insert_commas) Major bug with handling of negative values fixed.
8292         Also, inserts periods instead of commas if appropriate.
8293         (convert_CCx) New function.
8294         (convert_format_to_string) Added FMT_CCA...FMT_CCE to switch.
8295         (num_to_string) Changed `.' to set_decimal.
8296
8297         * dfm.c: Comment fixes.
8298         (dfm_close) Frees ext->line even in inline_file.
8299         (open_inline_file) New function.
8300         (open_file_r) When opening the inline file: now properly
8301         recognizes `BEGIN DATA.' line, and calls open_inline_file() to
8302         finish up.
8303         (read_record) Calls fh_close_handle() instead of dfm_close() to
8304         close the inline file.  Makes a copy of the line getl_buf to avoid
8305         interlock problems.
8306         (dfm_get_record) Restructured.  Now checks the return value of
8307         open_file_r().
8308         (cmd_begin_data) Moved open code into open_inline_file().  Relaxed
8309         checking for use of inline file.  No longer tries to close inline
8310         file.
8311
8312         * error.c: (glob var error_already_flagged) New var.
8313         (vmsg) Message change.  Now checks max number of errors/warnings,
8314         acts on it.
8315
8316         * file-handle.q: (fh_handle_name) Now allows closing of
8317         inline_file.
8318         (fh_init_files) Reformatted.
8319
8320         * get.c: (trim_dictionary) Checks SCOMP option instead of COMP.
8321
8322         * getline.c: (getl_include) Fixed bug that popped up when called
8323         when file queue was empty.
8324         (read_console) Resets error_count, warning_count,
8325         error_already_flagged to zero.
8326
8327         * glob.c: Many changes to update list of variables.
8328         (init_compat_dependent) Now this function is called whenever
8329         `compat' changes.  It now sets set_seed only if it hasn't
8330         previously been referenced.  It now calls
8331         lex_init_compat_dependent().
8332
8333         * include.c: (cmd_include_at) Frees temporary buffer instead of
8334         line buffer.  
8335         (cmd_include) Doesn't make copy of include file name.
8336
8337         * lexer.c: Comment fixes.
8338         (init_lex) Moved some code into new function
8339         lex_init_compat_dependent().
8340         (lex_init_compat_dependent) New function.
8341         (hex_val) Simplified.
8342         (preprocess_line) Uses set_endcmd instead of hardcoding `.'.
8343
8344         * main.c: Comment fixes.
8345         (main) Reformatted.
8346
8347         * misc.c: (formats[]) Added FMT_CCA...FMT_CCE.
8348         (check_input_specifier) Disallows FMT_CCA...FMT_CCE.
8349         (convert_fmt_ItoO) Detects FMT_CCA...FMT_CCE.
8350         (setup_randomize) Sets set_seed_used.
8351
8352         * set.q: Comment fixes.
8353         (custom_results) Conditionalizes on `compat'.
8354         (custom_log) Calls custom_journal().
8355         (set_ccx) New function.
8356         (cmd_set) Calls init_compat_dependent() when `compat' changes.
8357         Calls set_ccx() to handle CCA...CCE.  Sets set_grouping
8358         when set_decimal changes.  Range-checks values for MITERATE,
8359         MNEST.  Message fixes.
8360
8361         * settings.h: Comment fixes.
8362         (struct set_cust_currency) New struct.
8363         (set_cc[], set_grouping, set_seed_used) New global vars.
8364
8365         * var.h: (FMT_CCA...FMT_CCE) New output formats.
8366         (FCAT_OUTPUT_ONLY) New FCAT_* constant.
8367
8368 Thu Nov 28 23:14:07 1996  Ben Pfaff  <blp@gnu.org>
8369
8370         * glob.c: Revised variables to correspond to settings.h.
8371         (init_glob) Initializes variables from settings.h properly.
8372
8373         * set.q: Began long-overdue major revision to correspond to new
8374         philosophy.  Most code changed. 
8375
8376         * settings.h: Mostly changed; reorganized, reordered, large new
8377         comment.
8378
8379 Thu Nov 28 19:46:10 1996  Ben Pfaff  <blp@gnu.org>
8380
8381         * get.c: (cmd_save_internal) No longer forces compression off.
8382
8383         * sfm-read.c: (read_compressed_data) If eof is reached when
8384         reading a new instruction octet, only signal error if we're in the
8385         middle of a case.
8386
8387         * sfm-write.c: (COMPRESSION_BIAS) New #define.
8388         (struct sfm_fhuser_ext) New member `end'.
8389         (write_header) Refers to COMPRESSION_BIAS instead of magic 100.0.
8390         (ensure_buf_space) New function.
8391         (sfm_write_case) Reimplemented in order to support compression.
8392         (sfm_close) Writes out the remaining contents of the compression
8393         buffer if any.
8394
8395 Wed Nov 27 23:18:35 1996  Ben Pfaff  <blp@gnu.org>
8396
8397         * command.c: Defined SAVE and XSAVE commands in command table.
8398
8399         * common.h: second_lowest_value is of type flt64, not double.
8400
8401         * file-handle.h: Comment fix.
8402
8403         * get.c: Comment fixes.
8404         (static var `trns') New.
8405         (save_write_case_func, save_trns_proc, save_trns_free, null_func,
8406         cmd_save_internal, cmd_save, cmd_xsave) New functions.
8407         (dict_delete_run) Clears the variables and frees them now.
8408         (trim_dictionary) Sets default for compression.
8409         On KEEP subcommand, frees deleted variables as well as clearing
8410         them.  Finally got the sense of the test for deleting all
8411         variables correct.
8412         [DEBUGGING] (dump_dict_variables) Message fix.
8413
8414         * glob.c: (init_glob) set_compression set to 1 by default.
8415
8416         * list.q: Properly #includes config.h.
8417
8418         * misc.h: New macro REM_RND_UP.
8419
8420         * settings.h: Comment fix.
8421
8422         * sfm-read.c: (structs sysfile_header, sysfile_format,
8423         sysfile_variable; inline function bswap_int32) Moved to new file
8424         sfmP.h.
8425         (corrupt_msg) [__CHECKER__] No longer induces segfault.
8426         (sfm_read_dictionary) Fixed bug caused by failing to initialize
8427         var_by_index.
8428         (read_machine_flt64_info) Fixed some problems caused by confusion
8429         between flt64 and double types.
8430         (read_header) Message fix.
8431         (read_variables) Fixed set of cases in which we byte-swap sv.print
8432         and sv.write.  Fixed confusion of flt64 and double.
8433
8434         * sfm.h: (struct sfm_write_info) New.
8435
8436         * som-high.c: (som_draw_title) Properly frees `s'.
8437
8438         * temporary.c: (save_dictionary) Comment fix.
8439
8440         * var.h: Comment fixes.  New FMT_* enum, FMT_NUMBER_OF_FORMATS.
8441         (struct trns_header) Formatting fix.
8442         (struct save_trns) New.
8443
8444         * vars-atr.c: (discard_variables) Comment fix.
8445
8446         * sfm-write.c: New file, baseline release.
8447
8448         * sfmP.h: New file, baseline release.
8449
8450 Sun Nov 24 14:53:53 1996  Ben Pfaff  <blp@gnu.org>
8451
8452         * cmdline.c: (parse_command_line) `--version' output updated.
8453         (glob var syntax_message[]) Added my e-mail address.
8454
8455         * file-handle.q, lexer.c, vfm.c: Changed many instances of
8456         `illegal' to `invalid'.
8457
8458         * sfm-read.c: (struct sfm_fhuser_ext) New fields used as
8459         uncompression buffer.
8460         (sfm_close) Frees decompression buffer.
8461         (sfm_read_dictionary) Initializes decompression buffer.
8462         (buffer_input, read_compressed_data) New functions.
8463         (sfm_read_case) Restructured; now calls read_compressed_data() to
8464         handle compressed system file data.
8465
8466         * var.h: Comment fix.
8467
8468 Mon Nov 11 15:34:09 1996  Ben Pfaff  <blp@gnu.org>
8469
8470         * dfm.c: (dfm_close) Does not set h->{ext,class} because the
8471         caller handles it.
8472          
8473         * get.c: New comments.  New static var `get_file'.
8474         (cmd_get) Now fully implemented.  Calls discard_variables();
8475         initializes fv and lv for all variables; new debug code; sets
8476         up the dictionary; sets up the input program.
8477         (read_from_get, cancel_get) New functions.
8478
8479         * sfm-read.c: Comment fixes.
8480         (sfm_close) New static function.
8481         (sfm_read_dictionary) Properly sets up the class of the
8482         file_handle.  No longer cares what size the data is in records of
8483         type 7.  Also, on failure, properly cleans up the file_handle and
8484         free()s some stuff.
8485         (read_variables) No longer thinks it knows `nval' of the
8486         dictionary.  Now sets p.get.fv, etc., instead of speculatively
8487         setting fv itself.
8488         (read_value_labels) Fixed off-by-one error in indexing of
8489         var_by_index[].
8490         (sfm_read_case) New function.
8491         (sfm_r_class) New static var.
8492
8493         * var.h: (get_proc) New struct.
8494         (struct variable) New member p.get.
8495
8496 Thu Nov  7 20:52:28 1996  Ben Pfaff  <blp@gnu.org>
8497
8498         * get.c: Removed GTSV_OPT_MAP because of a misinterpretation of
8499         the manual's meaning.
8500         (rename_variables) New function.
8501         (trim_variables) Doesn't try to parse MAP any more.  Removed debug
8502         code.  Now properly reorders the dictionary on the KEEP keyword.
8503
8504         * sfm-read.c: (read_value_labels) Fixed some bugs regarding
8505         garbage collection.
8506
8507         * vars-atr.c: (clear_variable) New argument `dictionary *'.
8508         (rename_variable) New function.
8509         (free_val_lab) Reformatted.
8510
8511 Thu Nov  7 17:29:16 1996  Ben Pfaff  <blp@gnu.org>
8512
8513         * var.h: Reindented entire file.  Comment fixes.
8514         (glob vars var, var_by_name, nvar, N, nval, n_splits, splits)
8515         Removed.
8516         (glob var default_dict) New.
8517         (struct indirect_dictionary) Removed.
8518
8519         * Many other source files were changed to add `default_dict.'
8520         before all references to the dictionary of the active file.
8521         
8522         * vars-atr.c: (make_indirect_dictionary) Removed.
8523
8524         * glob.c: Reindented all variable declarations.  Updated for
8525         changed var.h.  Comment fixes.
8526
8527         * temporary.c: (restore_dictionary, save_dictionary) Simplified
8528         because now we can mainly copy dictionary structs.
8529
8530         * vars-prs.c: (is_dict_varname, parse_dict_variable,
8531         parse_variables) Takes dictionary instead of indirect_dictionary
8532         first argument.
8533         (parse_variables) Instead of calling make_indirect_dictionary,
8534         just sets DICT to &default_dict if DICT is NULL.  Of course, lots
8535         of `*dict.' references had to be changed to `dict->'.  Removed
8536         debug code.
8537
8538 Thu Nov  7 15:48:52 1996  Ben Pfaff  <blp@gnu.org>
8539
8540         * get.c: Added GTSV_OPT_* series of enums.
8541         (trim_dictionary, dict_delete_run) New functions.
8542         [DEBUGGING] (dump_dict_variables) New function.
8543         (cmd_get) Calls trim_dictionary() to get dictionary fully set-up.
8544         [DEBUGGING] Calls dump_dict_variables() to display results.
8545
8546         * glob.c: (cmp_variable) Now a public function declared in var.h.
8547
8548         * sfm-read.c: Turned off debug code.  Comment fixes.
8549         (read_machine_int32_info, read_machine_flt64_info) New functions
8550         to parse type 7 records.
8551         (sfm_read_dictionary) Properly byteswaps several fields now.
8552         Calls read_machine_*_info() to parse type 7 subtypes 3 and 4
8553         records.  [DEBUGGING] Dumps dictionary.
8554         (read_variables) Sets `index' field of variables created properly.
8555         Constructs avl tree of variables in dictionary.  [DEBUGGING] No
8556         longer dumps dictionary.
8557         (read_value_labels) Properly byteswaps fields.  [DEBUGGING] New
8558         debug code.
8559         [DEBUGGING] (dump_dictionary) No longer stubbed out.
8560
8561         * temporary.c: (restore_dictionary) Destroys `var_by_name' glob
8562         var before destroying any variables just to save a little time.
8563
8564         * var.h: (struct variable) Reordered in order to make name[] the
8565         first member; this makes pointers to `variable' pointers to the
8566         variable name, simplifying avl trees, etc.
8567         (struct indirect_dictionary) New struct.
8568
8569         * vars-atr.c: (find_variable) Rewritten for efficiency.
8570         (make_indirect_dictionary, is_dict_varname, parse_dict_variable)
8571         New functions.
8572         (is_varname) Rewritten for efficiency.
8573         (parse_variables) New argument, which is a `dictionary *'.  All
8574         references changed.  This function now reads variable names from
8575         the dictionary passed, or from the default dictionary if NULL.
8576
8577 Tue Nov  5 18:34:59 1996  Ben Pfaff  <blp@gnu.org>
8578
8579         * misc.h: Added new macro DIV_RND_UP to perform integer division,
8580         rounding up.  Changed many references to ROUND_UP to use this
8581         instead.
8582
8583         * sfm-read.c: Includes avl.h.
8584         (corrupt_msg) Induces a segfault under Checker.
8585         (macro assertive_bufread) New.  Many references to bufread() now
8586         use this instead.
8587         (sfm_read_dictionary) Split up into several functions.  Added code
8588         to read dictionary records following the the type 2 records.  Not
8589         quite complete.  New variable `var_by_index'.
8590         (read_header, read_variables) New functions extracted from
8591         sfm_read_dictionary().
8592         (read_value_labels) New function.
8593         (bufread) Checks ferror() if fread() doesn't return the expected
8594         value; if ferror() is zero it's just EOF.
8595         (dump_dictionary) Stubbed out.
8596
8597         * BTW: The source code now exceeds 50000 lines!
8598         
8599 Mon Nov  4 22:03:28 1996  Ben Pfaff  <blp@gnu.org>
8600
8601         * command.c: Added GET to cmd_table[].
8602
8603         * list.q: Removed reference to alloca headers.
8604         (cmd_list) Gave prototype.
8605
8606         * sfm-read.c: Added DEBUGGING comments.
8607         (sfm_read_dictionary) Checks bias correctly.  Sets
8608         dict->var_by_name to NULL.  Calculates long_string_count
8609         correctly.  realloc's dict->var[] array to minimum size.
8610         [DEBUGGING] Calls dump_dictionary.
8611         [DEBUGGING] (dump_dictionary) New function.
8612
8613         * temporary.c: (save_dictionary) Sets var_by_name to NULL.
8614         (restore_dictionary) If the dictionary contains a non-NULL
8615         var_by_name, uses that instead of generating one.
8616         (free_dictionary) Destroys var_by_name.
8617
8618         * var.h: (struct dictionary) Added field `var_by_name'.
8619
8620         * get.c: New file, not complete.
8621
8622 Sun Nov  3 12:24:36 1996  Ben Pfaff  <blp@gnu.org>
8623
8624         * mis-val.c: New enums MV_NOR_*.  New struct num_or_range.
8625         (parse_num_or_range) New function.
8626         (parse_numeric) Reimplemented in order to support LOW THRU <n> and
8627         <n> THRU HIGH missing values.
8628
8629         * output.h: [__GNUC__>1 && __OPTIMIZE__] (width, height) Made
8630         __attribute__((const)).
8631
8632         * q2c.c: (get_token) Merged isdigit || isalpha into isalnum.
8633
8634         * sfm-read.c: Finished reference implementation.
8635
8636         * sfm.h: Includes var.h.
8637
8638         * var.h: Comment fixes.
8639         (struct `variable') Reordered some fields.
8640
8641         * vars-atr.c: (is_num_user_missing) Added support for MISSING_*
8642         constants added previously.
8643
8644 Wed Oct 30 17:13:08 1996  Ben Pfaff  <blp@gnu.org>
8645
8646         * common.h: Comment fixes.  Added declaration of
8647         `second_lowest_value' as variable or macro.  Made `compat_type',
8648         `pgm_state_type' into anonymous enums.
8649
8650         * display.c: Comment fix.
8651
8652         * glob.c: [ENDIAN==UNKNOWN] Added definition for `endian' global
8653         var.
8654         [!defined SECOND_LOWEST_VALUE] Added definition for
8655         `second_lowest_value' global var.
8656         (compat, pgm_state global vars) Changed types to `int'.
8657         (init_glob) Initializes `second_lowest_value'.
8658
8659         * sfm-read.c: Continued work, not complete.
8660
8661         * var.h: Added new MISSING_* constants to handle LOWEST and
8662         HIGHEST.
8663
8664 Sat Oct 26 23:06:06 1996  Ben Pfaff  <blp@gnu.org>
8665
8666         * sfm-read.c: New file, not complete.
8667
8668         * cases.c: (vec_insert) Changed vector expansion algorithm.
8669         (vec_delete) Fixed bug that screwed up deletion sometimes, it was
8670         mucking up the RECODE transformation in particular.
8671         (envector) Harmless change in notation.
8672
8673         dfm is now fairly well tested again.  
8674         * dfm.c: (dfm_get_record) Only returns ext->ptr if ext is
8675         non-NULL--duh.
8676         (cmd_begin_data) if(ext->line) replaced by if(ext && ext->line).
8677
8678         * recode.c: Comment fix.
8679
8680         * sfm.h: Interface should be fairly final now, or at least for a
8681         day or so...
8682
8683         * vfm.c: [DEBUGGING] (index_to_varname) New function.
8684         (open_active_file) [DEBUGGING] Translates ccase indices into
8685         variable names now to make it easier to understand what's really
8686         going on.
8687
8688 Sat Oct 26 20:46:31 1996  Ben Pfaff  <blp@gnu.org>
8689
8690         * data-in.c: Comment fix.
8691
8692         * data-list.c: Includes dfm.h.
8693         (do_reading) Uses new function dfm_push_cust().
8694
8695         * data-out.c: (convert_time, convert_WKDAY, convert_MONTH) Added
8696         `return 1;' at end.
8697
8698         * file-handle.h: Completely changed.  Some parts split off into
8699         new file dfm.h.  Implemented in file-handle.q.
8700         (enum FH_*) Removed.
8701         (struct fh_ext_class) New struct.
8702         (struct file_handle) Retained only these fields: name, norm_fn,
8703         fn, recform, lrecl, mode.  New fields class, ext.
8704         (get_handle_by_name, get_handle_by_filename, parse_file_handle,
8705         close_handle, handle_name) Added `fh_' prefix to name, all
8706         references changed.
8707
8708         * dfm.h: New file, implemented in dfm.c.
8709         (get_record, put_record, fwd_record, bkwd_record, set_record,
8710         get_cur_col) Functions moved from file-handle.h, now prefixed with
8711         `dfm_'.
8712         (dfm_push_cust) New function.
8713
8714         * sfm.h: New file.  Incomplete.
8715
8716         * dfm.c: All functions adjusted/rewritten for new dfm/fhp
8717         interface.  Functions reordered, comments changed.  Not well
8718         tested, probably full of bugs.
8719         (struct dfm_fhuser_ext) New struct.
8720         (dfm_close) New function.
8721         (open_file_r) Pickier about finding `BEGIN DATA.' line.
8722         (open_file_w) User messages changed.
8723         (get_record) Comment fixed.
8724         (read_record) Increments ext->ln even for inline_file.  Calls
8725         dfm_close() for inline_file when `END DATA.' encountered.
8726         (dfm_get_record) Experimental restructuring.
8727         (dfm_push_cust) New function.
8728         (cmd_begin_data) Detects whether the inline file was fully read by
8729         checking whether it is still open; detects whether it was read at
8730         all by checking whether the line number is greater than zero.
8731
8732         * file-handle.q: All functions adjust/rewritten for new dfm/fhp
8733         interface.  Functions reordered, comments changed.  Not well
8734         tested, probably full of bugs.
8735         (init_file_handle) Removed initializers for obsolete fields, added
8736         new fields.
8737         (fh_close_handle) Much simpler, now mainly calls the class
8738         function.
8739         (fh_init_files) Renamed inline file internal filename.
8740
8741         * file-type.c: Includes dfm.h.
8742         (read_from_file_type) Doesn't use dfm internal state anymore.
8743
8744         * inpt-pgm.c, print.c: Include dfm.h.
8745
8746         * recode.c: (internal_cmd_recode) Casts strlen() return value to
8747         int in comparison with other int.
8748
8749         * som-high.c: (build_target) Fixed operator precedence problem in
8750         if statement (& versus ==).
8751
8752 Sat Oct 26 10:39:25 1996  Ben Pfaff  <blp@gnu.org>
8753
8754         * dfm.c: (read_record) Can now read fixed-length records; not
8755         tested.
8756         (put_record) Can now write fixed-length records; not tested.
8757
8758         * file-handle.h: FH_* defines changed to enums.  New enum series
8759         FH_RF_*, FH_MD_*.
8760         (struct file_handle) New members recform, lrecl, mode.
8761
8762         * file-handle.q: Parser changed.
8763         (internal_cmd_file_handle) Added support for new /RECFORM, /MODE,
8764         /LRECL subcommands.  These are compatible with Windows.
8765         (init_file_handle) Initializes recform, mode fields.
8766
8767         * q2c.c: (get_line) When outputting `!' comment lines, now
8768         increments the output file line number so that `#line' directives
8769         are correct.
8770         (make_identifier) New function that converts an arbitrary string
8771         into a valid C identifier.
8772         (dump_vars) Calls make_identifier() in two places in order to
8773         suppress some errors for bad identifiers.
8774         (make_match) Allows TRUE as synonym for YES and FALSE as synonym
8775         for NO.  Allows numbers to be prefixed by underscores to make them
8776         acceptable C identifiers but still to be parsed as numbers by the
8777         Fiasco lexer.
8778
8779 Thu Oct 24 20:13:42 1996  Ben Pfaff  <blp@gnu.org>
8780
8781         * command.c: Re-enabled RECODE, SAMPLE, SELECT IF.
8782         
8783         * dfm.c: Comment fixes. (get_record) Gives error if file handle
8784         was opened for writing.
8785         (open_file_w) New function.
8786         (read_record) Uses strncasecmp if available.  Improved error
8787         messages, comments.
8788         (put_record) New function.
8789
8790         * file-handle.h: Moved function comments into dfm.c and
8791         file-handle.q.  Comment fixes.  Removed declarations of
8792         tilde_expand() and normalize_filename().
8793         (struct file_handle) Changed `open' from boolean to enumerated
8794         field to allow for three states--closed, open for reading, open
8795         for writing--all references changed.
8796
8797         * file-handle.q: Includes filename.h.
8798
8799         * print.c: (CMD_* enums) Renamed PRT_* and moved into var.h; all
8800         references changed.
8801         (alloc_line) Makes allowance for line terminator characters in
8802         calculations.
8803         (print_trns_proc) Now handles OUTFILE, WRITE differences.
8804         (print_space_trns_proc) Handles OUTFILE differences.
8805
8806         * recode.c, sample.c: Comment fixes.
8807
8808         * var.h: (struct print_trns) Changed boolean field `eject' to
8809         bitmapped field `options'; all references changed.  New enums
8810         PRT_* for use with this field.
8811
8812         * exception.h, test-exception.c: Removed.
8813
8814 Thu Oct 24 17:47:14 1996  Ben Pfaff  <blp@gnu.org>
8815
8816         * ascii.c: (delineate) Turned off debug output.
8817
8818         * common.c: [Checker and Linux] (__assert_fail, __eprintf) Moved
8819         to error.c.
8820
8821         * data-in.c: (parse_string_as_format) Sets the entire string value
8822         to spaces, not just the short string part of it.  Is this correct
8823         now? 
8824
8825         * data-out.c: (convert_date) Fixed DATETIME format problems with
8826         decimal places, removed debug code.
8827
8828         * dfm.c: (open_file_r) Fixed bug where an error would occur in the
8829         middle of parsing BEGIN DATA that would cause the lexer to read
8830         from a wild pointer `prog'; now calls new function
8831         preprocess_line() in lexer.c.
8832
8833         * error.c: [__CHECKER__] (hcf) Calls induce_segfault() on improper
8834         termination.
8835         [Checker and Linux] (__assert_fail, _eprintf) Moved from common.c.
8836         Now call induce_segfault() to induce the segfault.
8837         (induce_segfault) New function.
8838
8839         * expr-opt.c: Comment fix.
8840         (parse_sysvar) New function.
8841         (parse_primary) Added system variable support--calls
8842         parse_sysvar().
8843         (global var ops) Added OP_CASENUM operator.
8844
8845         * expr.h: Comment fixes.
8846         (OP_* enum) added OP_CASENUM operator.
8847         (struct casenum_node) New struct.
8848         (union any_union_union) New member `cas' of type `casenum_node'.
8849
8850         * glob.c: (global var last_vfm_invocation) New var.
8851         (init_glob) Initializes last_vfm_invocation.
8852
8853         * lexer.c: (lookahead) Fixed reversed condition on if statement.
8854
8855         * getline.c: (get_line) Split into get_line() and preprocess_line().
8856         (preprocess_line) New function.
8857
8858         * var.h: Declares last_vfm_invocation.
8859
8860         * vfm.c: (procedure) Sets last_vfm_invocation.
8861
8862 Wed Oct 23 21:53:43 1996  Ben Pfaff  <blp@gnu.org>
8863
8864         * command.c: (parse_cmd) Fixed bad assertion related to
8865         lookahead().
8866
8867         * data-in.c: (parse_month) Implemented to parse months according
8868         to full interpretation of standard.
8869         (to_roman) New function.
8870         (parse_wk_delimiter) Bug fix (forgot to skip `WK' in string).
8871         (parse_weekday) Bug fix (forgot to skip all the day name).
8872
8873         * data-list.c: (read_from_data_list_fixed) Fixed bug that screwed
8874         up parsing of multirecord data items.  Also fixed user message.
8875
8876         * data-out.c: Comment fix.
8877         (year2, year4, convert_date, convert_time, convert_WKDAY,
8878         convert_MONTH) New functions to support time & date output.
8879         (convert_format_to_string) Calls new time & date output routines.
8880
8881         * expr-prs.c: (nary_num_func) Found a bug, but didn't fix it yet.
8882
8883         * lexer.c: (lookahead) Noted a previously unnoticed caveat in
8884         comment.
8885
8886         * main.c: [DEBUGGING] (dump_token) Updated to handle getline.h.
8887
8888         * misc.c: (global var formats) Fixed declarations of DATETIME,
8889         TIME, DTIME.
8890
8891         * postscript.c: (text) Fixed a pair of bugs in the reallocation of
8892         the output_char buffer.
8893
8894         * vars-prs.c: (parse_DATA_LIST_vars) Fixed a failure to free
8895         memory bug.  Fixed user messages.
8896
8897 Tue Oct 22 17:27:04 1996  Ben Pfaff  <blp@gnu.org>
8898
8899         * Removed #pragma argsused from lots of places.
8900         
8901         * data-in.c: Implemented zoned decimal and time-date formats.
8902         Untested.  This is a huge chunk of code--maybe 1000 lines and 50
8903         new functions.
8904
8905         * data-out.c: Implemented zoned decimal format.
8906
8907         * expr.h: Moved yrmoda() declaration here from exprP.h.
8908
8909         * misc.c: (global var formats) Minor fixes--added
8910         FCAT_SHIFT_DECIMAL to formats N and Z.
8911         (convert_fmt_ItoO) Added support for format Z.
8912
8913         * som-frnt.c: (som_set_value) Fixed bug regarding string values.
8914
8915 Mon Oct 21 20:39:59 1996  Ben Pfaff  <blp@gnu.org>
8916
8917         * command.c: (parse_cmd) [GLOBAL_DEBUGGING] Inserted call to
8918         som_check_workspace() that is activated between commands.
8919
8920         * data-list.c: (dump_fixed_table, dump_free_table) Finished these
8921         for good, I hope.
8922
8923         * list.q: (begin_row) Changed title expansion style from
8924         SOPT_X_VERT to SOPT_X_SHSP.
8925
8926         * som-frnt.c: Now includes `somP.h'.
8927         (som_push_workspace, som_pop_workspace) New functions that, taken
8928         together, form a solution to the recursive table building problem
8929         mentioned yesterday.  Surrounded every table output routine
8930         throughout the program with calls to these functions.
8931         [GLOBAL_DEBUGGING] (som_check_workspace) New function.
8932         (som_create_table) Checks that there's an active workspace.
8933         (som_destroy_all_tables, som_crush) Removed.
8934
8935         * som-high.c: (global var som_preserve_tables) Removed, all
8936         references deleted.
8937         (som_submit_table) Checks that there's an active workspace.
8938         (dump_columnated_table) Doesn't columnate tables that would have
8939         just one row per column.
8940         (dump_crush_page, som_dump_crush_page) Removed debugging code.
8941         (som_dump_crush_page) Moved row number labels from left side of
8942         tables to right side.
8943         (som_get_table_size) Added support for SOPT_X_SHSP.
8944
8945         * som.h: New cell expansion type SOPT_X_SHSP.
8946
8947         * somP.h: (global vars arena_stack, n_arena_stack, m_arena_stack)
8948         New vars.
8949         (global var curtab_arena) Moved from som-frnt.c.
8950
8951 Sun Oct 20 13:45:28 1996  Ben Pfaff  <blp@gnu.org>
8952
8953         * ascii.c: [GLOBAL_DEBUGGING] (SUPPRESS_WARNINGS) New debug option
8954         that causes bad location warnings to be suppressed.
8955         (delineate) Saves current font when calling draw_text(); fixed
8956         handling of NULLs when backing up.  Also fixed line-wrapping bug.
8957
8958         * command.c: Re-enabled `LEAVE', `NUMERIC', `PRINT', `PRINT EJECT',
8959         `PRINT FORMATS', `PRINT SPACE', `STRING', `TITLE', `WRITE'.
8960
8961         * common.c: Added code to cause assertion failure to dump core
8962         when run under Checker.
8963
8964         * data-list.c: (dump_fixed_table) Fixed some inconsistencies, but
8965         there are still bugs.
8966
8967         * glob.c: (__eprintf) Removed.
8968
8969         * list.q: Inserted som_preserve_tables kluge that prevents tables
8970         from being thrown away due to recursive table building through
8971         som_output_line being called from a transformation during the LIST
8972         procedure invocation.  This is a general problem that must be
8973         solved in a better way since it applies to all procedures in
8974         general.
8975         (begin_row) Changed title options to SOM_X_VERT from SOM_X_BOTH.
8976         (flush_table) Removed SOM_TOPT_PRESERVE from submission options.
8977
8978         * numeric.c: Fixed several errors in the form of msg() calls.
8979
8980         * print.c: Updated for use of som.
8981         (dump_table) Reimplemented.
8982         (print_trns_proc) Calls som_eject_page() instead of eject_page().
8983         Calls som_output_text() instead of outs_line().
8984
8985         * som-frnt.c: (som_destroy_all_tables) Sets som_preserve_tables to
8986         0.
8987         (som_output_text) Function moved from som-low.c.  Interface
8988         changed.
8989
8990         * som-high.c: (som_preserve_tables) New global public variable
8991         declared in som.h.
8992         (som_submit_table) Destroys the tables only if som_preserve_tables
8993         is 0.
8994         (paginate_horizontally) Bugfix: sets som.mpw even if there's only
8995         one subrow per row.  Now labels subrows if there's more than one
8996         subrow per row.
8997         (dump_crush_table) Added wishlist comment.
8998         (som_eject_page) New public function declared in som.h.
8999
9000         * som-low.c: (som_dump_crush_page) Draws row labels if there's
9001         more than one subrow per row.
9002         (som_output_text) Moved to som-frnt.c.
9003
9004         * som.h: (SOM_TOPT_PRESERVE) Removed.
9005
9006         * title.c: (get_title) Changed interface.
9007         (cmd_title) Changed `title' to `outp_title'.
9008         (cmd_subtitle) Changed `subtitle' to `outp_subtitle'.
9009
9010 Sun Oct 20 09:04:15 1996  Ben Pfaff  <blp@gnu.org>
9011
9012         * list.q: (flush_table) Conforms to new partial options in
9013         som_submission_form.
9014
9015         * som-high.c: (paginate_horizontally) Changed form of subrow
9016         number labels.
9017         (build_target) Omits spacing before table if
9018         SOM_TOPT_PARTIAL_OMIT_TOP is selected.
9019         (dump_crush_page) Changed interface.  Only trims bottom rule if
9020         SOM_TOPT_PARTIAL_OMIT_BTM is not selected.
9021         (dump_crush_table) Handles partial tables.
9022         (output_row_label) New function.
9023         (som_dump_crush_page) Emits subrow number labels.  Draws vertical
9024         rule on the right edge of narrow subrows.
9025
9026         * som.h: Changed SOM_SUB_PARTIAL_* series of submission type
9027         constants to a series of SOM_TOPT_PARTIAL_* submission options.
9028         All references updated.
9029
9030 Fri Oct 18 19:46:49 1996  Ben Pfaff  <blp@gnu.org>
9031
9032         * misc.c: Comment fix.
9033
9034         * som-high.c: (examine_table) Treats crushed tables separates for
9035         purpose of determining header size.
9036         (paginate_horizontally) Allots space for line numbers in crushed
9037         tables with lots of subrows per row.  Calculates the `maximum page
9038         width', the width of the widest horizontal page.
9039         (build_target) Removed trim argument; all references changed.
9040         Stricter assertions.  (dump_crush_page) New function.
9041         (dump_crush_table) Reimplemented.
9042
9043         * som-low.c: (som_dump_page) Uses new RULE_ROW &c. constants.
9044         (som_dump_crush_page) Reimplemented, interface changed.
9045
9046         * somP.h: Many many new helper macros for use with crushed tables.
9047         (global var som) Removed `tv', `cum_y' members; all references
9048         removed.  New members `mpw', `digit_space'.
9049
9050 Sun Sep 29 19:37:03 1996  Ben Pfaff  <blp@gnu.org>
9051
9052         * arena.c: (arena_alloc) [!DISCRETE_BLOCKS] Removed `size'
9053         variable, changed to constant 1024.
9054         (arena_ca_strdup) Changed `sizeof(a_string)' to
9055         `sizeof(c_string)'.
9056         (arena_ca_strdup) [!DISCRETE_BLOCKS] Changed bad cast from
9057         `(c_string *)' to `(char *)'; this fixed some offset problems.
9058
9059         * filename.c: (readlink_malloc) Changed initial allocation from
9060         100 bytes to 128.
9061         (good_getcwd) Changed from xmalloc() to local_alloc(); removed
9062         comment.
9063
9064         * postscript.c: (read_fontmap) Fixed leak by changing &owner to
9065         &fm->owner in several places.
9066
9067         * som-high.c: (output_table) Changed interface to rest of world.
9068         (examine_crush_table) Removed.  Crushed tables are re-broken now,
9069         in preparation for rewrite.
9070
9071         * som.h: Comment fix.
9072
9073 Sat Sep 28 21:28:07 1996  Ben Pfaff  <blp@gnu.org>
9074
9075         * ascii.c: (ascii_init_driver) Disposes of x->file.filename and x
9076         itself in the cleanup stage.
9077
9078         * descript.q: (display) At least temporarily, changed the table
9079         format to a crushed table.
9080
9081         * list.q: (begin_row) At least temporarily, added horizontal lines
9082         between cases.
9083
9084         * som-high.c: (examine_crush_table) Sets som.hh to the width of
9085         the horizontal "headers," that is, to the width of the far left
9086         and far right rules.
9087         (justify_pagination) Sets som.th to the width of the widest row
9088         in the crushed table.  Fixed inner loop off-by-one error.
9089
9090         * som-low.c: (som_dump_crush_page) Added code to draw horizontal
9091         rules.
9092
9093         * somP.h: Comment fix.
9094
9095 Fri Sep 27 20:08:39 1996  Ben Pfaff  <blp@gnu.org>
9096
9097         * filename.c: (open_file_ext) Now, doesn't set f->file to NULL
9098         before closing it; also, opens the constructed filename `s'
9099         instead of f->filename.
9100
9101         * postscript.c: Moved initialization of x->loaded, x->prop,
9102         x->fixed, x->current, also the add_encoding() calls, into
9103         postopen().
9104         (preclose) Destroys x->combos; sets x->loaded, x->combos to NULL;
9105         sets x->last_font to NULL; sets x->next_combo to zero.
9106
9107         * som-high.c: (crushed_row_height) Moved definition farther up.
9108         (som_submit_table) Doesn't calculate line width, font size until
9109         after calling open_page(), to accomodate changes to PostScript
9110         driver.
9111         (vert_headers) Removed; equivalent functionality moved to
9112         examine_table(), examine_crush_table().
9113         (justify_pagination) Replaced with different algorithm.
9114         (dump_crush_table) Bugfix that caused tables to fail to be clipped
9115         at the bottom of the page.
9116
9117 Thu Sep 26 22:20:26 1996  Ben Pfaff  <blp@gnu.org>
9118
9119         * command.c: Added cmd_list back into cmd_table.
9120
9121         * freq.c, frequencies.q, repeat.c, list.q, vars-atr.c, vfm.c:
9122         Comment fix: `#define DEBUGGING' --> `#define DEBUGGING 1'.
9123
9124         * list.q: (flush_table) Updated to new som_submission_form format.
9125
9126         * som-frnt.c: Comment fix.
9127
9128         * som-high.c: Changed `#endif' to `#undef EXTERN'.
9129         (output_table) Calls som_get_table_size() directly; handles
9130         crushed tables.
9131         (examine_crush_table) New function; calls vert_headers().
9132         (examine_table) Moved some code into new function, vert_headers().
9133         (justify_pagination) New function.
9134         (dump_plain_table) Removed `static' from `cy'.
9135         (dump_crush_table) New function.
9136
9137         * som-low.c: (som_dump_crush_page) New function.
9138
9139         * som.h: Comment fixes.
9140         (enum SOM_TOPT_CRUSH) New.
9141         (SOM_SUB_PARTIAL_BEG, SOM_SUB_PARTIAL_MID, SOM_SUB_PARTIAL_END)
9142         Temporarily set to zero to make do with LIST procedure.
9143
9144         * somP.h: Re-ordering.
9145
9146 Wed Sep 25 19:36:11 1996  Ben Pfaff  <blp@gnu.org>
9147
9148         * som.c: Split into som-frnt.c, som-high.c, som-low.c.
9149
9150         * somP.h: New file for use by som-high.c, som-low.c.
9151
9152         * q2c.c: Added definition for VME.
9153         (get_line) Now dumps `!' comment lines to the output file
9154         verbatim.
9155
9156         * crosstabs.q, descript.q, file-handle.q, frequencies.q, list.q,
9157         set.q: Changed format of `!' comment lines.
9158
9159 Tue Sep 24 18:39:09 1996  Ben Pfaff  <blp@gnu.org>
9160
9161         * All source files: Added copyright notice.
9162
9163         * common.c: (xmalloc, xrealloc, xstrdup) Cast size_t's to unsigned
9164         longs in msg() calls.
9165
9166         * con32s.c: (xmalloc, xrealloc) Updated from common.c.
9167
9168         * q2c.c: (xmalloc, xrealloc, xstrdup) Updated from common.c.
9169
9170 Sat Sep 21 23:16:31 1996  Ben Pfaff  <blp@gnu.org>
9171
9172         * output.c: (outp_read_devices) Changed criteria for
9173         distinguishing different types of lines.
9174
9175 Fri Sep 20 22:52:28 1996  Ben Pfaff  <blp@gnu.org>
9176
9177         * cmdline.c: Changed syntax message.
9178
9179         * filename.c: (good_getcwd) Bug fix (?).
9180         (normalize_filename) [__BORLANDC__] Uses _fullpath() library
9181         function.
9182         (search_path) Appends DIR_SEPARATOR to directory name only if it
9183         does not already end with one.
9184
9185         * glob.c: Checks STAT_PAGER envvar before PAGER.
9186
9187         * output.c: Checks environment variables instead of just local
9188         macros.
9189
9190 Tue Sep 10 21:39:00 1996  Ben Pfaff  <blp@gnu.org>
9191
9192         * arena.c: (arena_destroy) Swatted a subtle bug that cropped up
9193         when the pointer passed to the function was within the arena
9194         itself, so that it couldn't properly be set to NULL _after the
9195         arena was freed_.
9196
9197         * command.c: Re-enabled DISPLAY.
9198
9199         * display.c: Rewritten to handle tables.  Untested.
9200
9201         * filename.c: (search_path) Fixed memory leak.
9202
9203         * frequencies.q: (cmd_frequencies) Frees v_variables.
9204         (postcalc) Calls cleanup_freq_tab() after displaying statistics.
9205         (cleanup_freq_tab) New function to garbage collect.
9206         (dump_full) Elegantized.
9207
9208         * main.c: New comment.
9209
9210         * output.h: New tag for tagged quotes: TAG_NEWLINE.
9211
9212         * postscript.c: Comment fix.
9213         (release_fontmap, free_font_entry) New functions.
9214         (ps_init_driver) Sets free_font_entry() as the freefunc for
9215         hashtable `loaded'.  Calls release_fontmap() when destroying a
9216         driver; also frees the output filename; also frees the
9217         ps_driver_ext block.
9218         (free_ps_encoding) Frees the filename as well as the encoding
9219         block.
9220         (output_encodings) Frees the line buffer and pops the msg-filename
9221         stack.
9222         (read_fontmap) Frees the fontmap filename and the line buffer.
9223         (postopen, preclose) Misc. garbage collection fixes.
9224         (ps_open_page) Destroys the `combos' hash table; sets `last_font'
9225         to NULL; this fixes some output problems.
9226         (text) Handles TAG_NEWLINE.  Untested.
9227
9228         * som.c: (cell_byte_size) Merged SCON_VALUE and SCON_TEXT cases.
9229         (som_set_string) Removed.  All references changed to
9230         `som_set_text'.
9231         (som_set_text) Rewritten.  New interface.  More general.
9232
9233         * som.h: Minor format changes.
9234         (struct som_value_cell) Removed; all references changed to
9235         `som_text_cell'.
9236         (enums SOT_*) Changed.
9237
9238 Mon Sep  9 21:43:13 1996  Ben Pfaff  <blp@gnu.org>
9239
9240         * command.c: Re-enabled SPLIT FILE.
9241
9242         * postscript.c: Comment fix.
9243
9244         * som.h: Added `SOT_NONE'.
9245
9246         * split-file.h: (cmd_split_file) Removed superfluous parenthesis.
9247
9248         * vfm.c: (dump_splits) Reimplemented.
9249
9250 Sat Sep  7 22:35:12 1996  Ben Pfaff  <blp@gnu.org>
9251
9252         * Compiled the project under gcc 2.7.2, which gave some new
9253         warnings.  This led to many additions of casts from unsigned to
9254         int sprinkled throughout the code.
9255         
9256         * arena.c: Many uses of `unsigned' changed to `size_t'.
9257
9258         * command.c: Added END FILE, END REPEAT to command table.
9259         (var cmd_end_repeat) Renamed cmd_end_repeat_p.
9260         (find_command, FILE_TYPE_okay) Not commented out anymore.
9261         (parse_cmd) Calls FILE_TYPE_okay again.
9262         (output_line) Added calls to som_output_text() to put the line
9263         in the output files.
9264
9265         * common.c: (macro VME) Format changes.
9266         (xstrdup) Asserts that its argument is not NULL.
9267         
9268         * data-list.c: Implemented dump_fixed_table().
9269         
9270         * inpt-pgm.c: Formatting changes.  Comment changes.
9271         (end_case_proc) Renamed end_case_trns_proc.
9272         (cmd_end_file, end_file_trns_proc) New functions.
9273
9274         * misc.c: Many uses of `int' and `unsigned' changed to `size_t'.
9275
9276         * misc.h: (local_strdup) New macro corresponding to strdup() but
9277         allocating its data through local_alloc() if possible--that is, if
9278         GNU C is in use.
9279
9280         * postscript.c: Comment changes.
9281         (quote_ps_name, quote_ps_string, output_encodings) New functions.
9282         (output_line, add_string) New macros supporting
9283         output_encodings().
9284         (postopen) Fixed contents of ${fixed-font} and ${prop-font}
9285         substitution vars.  Calls output_encodings() when a line
9286         consisting of `!encodings' is encountered.
9287         (preclose) Some code moved into quote_ps_string().
9288         (dump_line) Changed into macro supporting dump_fancy_line().
9289         (switch_font) Now outputs DSC "%%IncludeResource: font (...)"
9290         command when appropriate.
9291         (write_text) Fixed `literal_char' array (I think it's fixed, at
9292         least.)
9293         (text) Fixed bug when width was zero.  Now exits immediately on
9294         zero height_left.  Now, when executing `goto restart;', checks
9295         that cp<end, so that we don't read beyond end-of-string.  Also,
9296         outputs the correct code to the output file by outputting the code
9297         from the metric instead of the internal metric index.
9298
9299         * repeat.c: (cmd_end_repeat) New function.
9300
9301         * som.c: (var som) `headers' renamed `options' and semantics
9302         changed.  All references changed.
9303         (draw_title) `if(px!=-1 || px!=-1)' --> `if(px!=-1 || py!=-1)'.
9304         (build_target) Only inserts spacing if SOM_TOPT_SPACING not
9305         selected.
9306         (som_text_table) Removed.
9307         (som_output_text) New function.
9308
9309         * som.h: (struct som_submission_form) Removed `header', `reuse',
9310         replaced with bitmapped field `options'.
9311         (SOM_TOPT_*) New enum set for som_submission_form.options.
9312         (SOT_*) New enum set for som_output_text().
9313
9314         * temporary.c: (copy_variable) When copying the var label, only
9315         calls xstrdup() if it's non-NULL.
9316
9317         * var.h: (enum type `vartype') Removed; all references changed to
9318         `int'.
9319
9320         * vars-atr.c: (init_variable) Changed local var `nbytes' from
9321         `int' to `size_t'.
9322
9323 Thu Sep  5 22:05:56 1996  Ben Pfaff  <blp@gnu.org>
9324
9325         * font.h: Comment changes.
9326
9327         * groff-font.c: (groff_read_font) Initializes `name' field to
9328         NULL.  Handles `encoding' field.
9329
9330         * hash.c: (hsh_dump) [GLOBAL_DEBUGGING] Output formatting changes.
9331
9332         * postscript.c: (struct font_entry) Removed `position' field.
9333         (struct ps_font_combo) New struct.
9334         (struct ps_driver_ext) Removed field `next_position'.  New fields
9335         `combos', `next_combo'.  `last_font' field changed from
9336         `font_entry *' to `ps_font_combo *'.
9337         (ps_init_driver) Reformatted; handles new fields.  When
9338         OPO_AUTO_ENCODE is set, adds the two default fonts' encodings to
9339         the encoding list.
9340         (get_encoding, find_encoding_file) New functions.
9341         (add_encoding) Some code moved out into find_encoding_file().
9342         (postopen) Changed value for ${title}.
9343         (preclose) Sets `loaded' field to NULL after destroying the hash
9344         table.
9345         (ps_open_page) Added comment.  Inits the `combos' and `next_combo'
9346         fields.
9347         (ps_text_set_font_by_position) Figures out the current family if
9348         not known.
9349         (compare_ps_combo, hash_ps_combo, free_ps_combo) New functions.
9350         (switch_font) Implemented.
9351         (write_text) Calls switch_font() more often.  Format changes.
9352         #undefs its macros after they're no longer useful.
9353         (text) Changed `continue' at one point to a jump to the top of the
9354         loop because we don't want `separate' reset to 0 at that point.
9355         (load_font) No longer sets `position' in the font_entry created.
9356
9357 Wed Sep  4 21:45:35 1996  Ben Pfaff  <blp@gnu.org>
9358
9359         * font.h: (struct font_desc) New member `encoding', which is not
9360         properly handled yet.
9361
9362         * glob.c: (init_glob) Some new i18n code, which is probably
9363         screwed up.
9364
9365         * output.c: (outp_read_devices, outp_get_paper_size) Changed
9366         `size' local from `int' to `size_t'.
9367
9368         * postscript.c: New driver configuration parameter `auto-encode'.
9369         New enums OPO_AUTO_ENCODE, ODA_COUNT.
9370         (struct font_entry) New member `position'.
9371         (struct ps_driver_ext) Reordered.  New hash table member
9372         `encodings'; new members `next_position', `next_encoding',
9373         `last_font'.  Members `current', `prop', `fixed' changed from type
9374         `font_desc *' to `font_entry *'; all references changed.
9375         (struct ps_encoding) New struct.
9376         (read_ps_encodings, compare_ps_encoding, hash_ps_encoding,
9377         free_ps_encoding, add_encoding) New functions.
9378         (ps_init_driver) Added OPO_AUTO_ENCODE to default
9379         x->output_options.  Initializes new members of ps_driver_ext.
9380         Changed default value for prologue_fn, encoding_fn.  Calls
9381         read_ps_encodings after loading default fonts.
9382         (option_tab[], ps_option) Handle new configuration parameter.
9383         (switch_font) New function.
9384         (struct output_char) `font' member changed from `font_desc *' to
9385         `font_entry *'.  New member `separate'.
9386         (read_fontmap) Changed `size' from `int' to `size_t'.
9387         (output_line, put_number) New macros for write_text().
9388         (write_text) Optimizes text output by consolidating multiple
9389         calls to PostScript `show' operator.
9390         (text) Keeps track of when text arguments can't be consolidated by
9391         write_text(), and marks those spots in the output stream.
9392         (load_font) Sets `position' of the allocated font_entry to -1, cuz
9393         the font hasn't been switched to by switch_font(), which is where
9394         the position is important--the PostScript is what cares about the
9395         position.
9396
9397 Sat Aug 31 23:52:38 1996  Ben Pfaff  <blp@gnu.org>
9398
9399         * hash.c: (hsh_destroy) Ignores NULL argument.  Doesn't try to
9400         call a NULL free_func.
9401         (hsh_rehash) Elegantized.
9402         (hsh_probe) Fix bug that manifested when the table was expanded
9403         and thus had to change location in memory.  Good thing
9404         too--otherwise could have been much more subtle.
9405         (hsh_find) [GLOBAL_DEBUGGING] Not stubbed out anymore.
9406         (hsh_foreach) New function for hash table iteration.
9407
9408         * hash.h: (struct hsh_iterator) New.
9409
9410         * lexer.c: (parse_tagged_quote) Font and family name strings in
9411         tags are now null-terminated.
9412
9413         * output.c: (outp_evaluate_dimension) Fixed over-aggressive unit
9414         parsing.
9415         (internal_get_paper_size, outp_get_paper_size) Fixed; now work as
9416         documented.  (Never before tested?)
9417
9418         * output.h: Comment changes.
9419
9420         * postscript.c: New driver options `optimize-text-size',
9421         `optimize-line-size', `max-fonts-simult'.  New enum set for
9422         specing cached line types.  Comment fixes.
9423         (struct line_form) New struct.
9424         (struct ps_driver_struct) New members `text_opt', `line_opt',
9425         `max_fonts', `lines'.
9426         (ps_init_driver) Initializes new members of ps_driver_struct.
9427         (user option type enum set) New member `nonneg_int_arg'.
9428         (static var option_tab[]) Supports new options.
9429         (ps_option) Handles new options.
9430         (find_ps_file) Made static.  No longer calls hsh_dump().
9431         (ps_get_var) Made static.
9432         (preclose) Dumps out proper DSC trailer.
9433         (ps_open_page) Elegantized.
9434         (ps_close_page) Calls dump_lines() if appropriate.
9435         (ps_line_horz, ps_line_vert, ps_line_intersection) Reduced to
9436         wrappers around line().
9437         (int_2_compare, compare_line, dump_line, dump_fancy_line,
9438         dump_lines, hash_line, free_line, line) New functions for support
9439         of line caching.
9440         (write_text, text) Made static.
9441         (text) Added to font support, not finished.
9442
9443 Thu Aug 29 21:36:41 1996  Ben Pfaff  <blp@gnu.org>
9444
9445         * font.h: (struct font_desc) New members ascent, descent.
9446
9447         * groff-font.c: (groff_read_font) Calculates font ascent and
9448         descent from the ascent and descent of the `d' and `p' characters,
9449         respectively, as per a suggestion on comp.fonts.
9450
9451         * postscript.c: (ps_open_page, ps_close_page, ps_line_horz,
9452         ps_line_vert, ps_line_intersection) Rewritten to deal with changed
9453         prologue.
9454         (write_text) Handles text right-justification and centering (not
9455         full justification).  Still very inefficient.  (One output line
9456         per character?!)
9457         (struct output_char) Added fields for font and font size.
9458         (text) Many bugfixes.
9459
9460 Sat Aug 24 23:26:00 1996  Ben Pfaff  <blp@gnu.org>
9461
9462         * cmdline.c: (usage) Calls outp_list_classes().
9463
9464         * font.h: Comment fix.
9465
9466         * groff-font.c: New exported global var `space_index'.
9467         (groff_init) New function to initialize `space_index'.
9468         (hash_kern) Casts result to unsigned.
9469         (font_name_to_index) Renamed font_char_name_to_index.  All
9470         references changed.  Also, now returns the value of `space_index'
9471         when passed an ASCII space character as an argument.  Fixed
9472         handling of nulls.
9473         (font_get_kern_adjust) Changed i from `int' to `unsigned'.
9474         Handles passed NULL pointers properly.
9475
9476         * lexer.c: (parse_tagged_quote) Comment fix.  Better range
9477         checking.
9478
9479         * output.c: (outp_list_drivers) Removed.  Removed all references.
9480         
9481         * output.h: Comment fixes.
9482
9483         * postscript.c: (ps_open_global) Calls groff_init().
9484         (output_char) New structure.
9485         (write_text) New function.
9486         (text) No longer stubbed out!  Now the output is correct--with a
9487         few exceptions, one of them being that the page has to be held
9488         upside down into a mirror.
9489
9490 Sun Aug 11 21:31:22 1996  Ben Pfaff  <blp@gnu.org>
9491
9492         * font.h: Comment fix.
9493         
9494         * font.c: (name_to_index) Renamed font_name_to_index, made extern.
9495         All callers changed.
9496         (number_to_index) Renamed font_number_to_index, made extern.  All
9497         callers changed.
9498         (font_get_kern_adjust, font_get_char_metrics) New functions.
9499
9500         * output.h: New constant OUTP_T_INTERNAL_DRAW.
9501
9502         * postscript.c: Changed default line width back to 1/2 point.
9503         (ps_line_horz, ps_line_vert, ps_line_intersection) Now lines are
9504         in the center of the space allotted for them, not just a fixed
9505         offset from the edge of the space; this fixes some bugs.
9506         (ps_line_intersection) Now supports all command line styles.
9507         (ps_text_get_size) Bug fix in computation of em width.
9508         (text) New function, the meat behind ps_text_metrics and
9509         ps_text_draw.  Not complete.
9510         (ps_text_metrics, ps_text_draw) Removed the stub taken from
9511         ascii.c; call text().
9512
9513 Sat Aug 10 23:28:17 1996  Ben Pfaff  <blp@gnu.org>
9514
9515         * arena.c: (arena_free) Assert that the argument is non-NULL.
9516         
9517         * groff-font.c: (add_kern) Calls arena_free() for old_kern if and
9518         only if old_kern is non-NULL.
9519
9520         * postscript.c: (ps_init_driver) Changed default line width to 1
9521         point.
9522         (postopen) New prologue variables.
9523         (ps_line_horz, ps_line_vert, ps_line_intersection) Implements some
9524         more of the common line styles properly, but not all.
9525         (ps_text_metrics) Fixed problem with this stubbed out version that
9526         kept it from taking font sizes into account.
9527
9528 Thu Aug  8 22:31:11 1996  Ben Pfaff  <blp@gnu.org>
9529
9530         * arena.c: (arena_malloc) Bug fix.
9531         (arena_dump) [GLOBAL_DEBUGGING] New function.
9532
9533         * ascii.c: Comment fix.
9534         (count_fancy_chars, delineate) Now static functions.
9535         
9536         * filename.c: (interp_vars) Bug fixes.
9537
9538         * font.h: Comment fixes.
9539
9540         * glob.c: (init_glob) Sets set_viewwidth, set_viewlength at
9541         beginning in case we have an error message to display before
9542         initializing the display.
9543
9544         * groff-font.c: Comment fix.  Changed rehash threshold from 2/3
9545         full to 1/2 full.
9546         (groff_read_font) Bug fixes.
9547         (name_to_index) Increments hash.used.  Sets `name' field of hash
9548         entry properly.
9549         (add_kern) Sets kern_max_used after rehashing.  Other bug fixes.
9550
9551         * hash.c: Return type changed.
9552
9553         * postscript.c: Continued development.  Now marks lines on the
9554         paper, but very buggy.
9555
9556 Sat Aug  3 20:50:35 1996  Ben Pfaff  <blp@gnu.org>
9557
9558         * Changed comments in many source files from `/* xxx /* yyy */' to
9559         `/* xxx */ /* yyy */' for cleanliness.
9560
9561         * arena.c: (arena_sd_strdup) New function.
9562         
9563         * ascii.c: (struct ascii_driver_ext) New member `file'.
9564         (ascii_init_driver) Fills out member `file' for initing; uses
9565         close_file_ext for closing drivers.
9566         (ascii_option) Changed %.*s back to %s because the a_string's are
9567         always null-terminated.
9568         (postopen, preclose) New functions.
9569         (ascii_open_page) Uses new style of open_file_ext.
9570         (ascii_option, commit_line_buf, output_lines) Use ext->file.file
9571         instead of this->output.
9572         (__assert_fail) Removed.
9573
9574         * cmdline.c: Changed syntax_message[].
9575
9576         * error.c: #include's <readline/history.h> only if the history
9577         library is available, not if just the readline library is
9578         available.
9579
9580         * filename.c: (expand_line) Removed alloca() support.
9581         (interp_vars) No longer tilde-expands argument.  Limit on output
9582         length removed.
9583         (tilde_expand) Now treats argument as path rather than filename.
9584         [!unix] Now is a no-op function.
9585         (search_path) Better verbose message formatting.
9586         (open_file, close_file) Comment fixes.
9587         (close_file) [!unix] Doesn't bother with pipes.
9588         (open_file_ext) Completely rewritten, interface revamped.
9589         (close_file_ext) New function.
9590
9591         * font.h: Comment changes.
9592
9593         * frequencies.q: Removed AIX alloca support since it doesn't use
9594         alloca.
9595
9596         * hash.c: Comment changes & additions.
9597         (hsh_create) Initializes entire table instead of first M entries.
9598         (hsh_probe) Stupid bug fixed.  Now it works.
9599         (hsh_dump) [GLOBAL_DEBUGGING] New function.
9600
9601         * main.c: (parse) Detects EOF properly in token-eating loop.
9602         Should the STOP token have its value changed to 0?
9603
9604         * misc.c: (blp_getdelim) [HAVE_GETDELIM] Now it's a macro.
9605         (blp_getline) Now it's a macro.
9606
9607         * output.h: (struct outp_driver) Removed members output, filename.
9608         
9609         * output.c: (outp_init) [!NO_POSTSCRIPT] Installs PostScript
9610         drivers in driver table.
9611         (outp_read_devices) Frees buf.  Warns if there are no active
9612         output drivers.
9613         (outp_configure_clear) Sets outp_configure_vec to NULL after
9614         deleting its elements.
9615         (configure_driver, destroy_driver) Removed references to output,
9616         filename members of outp_driver.
9617         (outp_evaluate_dimension, internal_get_paper_size,
9618         outp_get_paper_size) New functions.
9619
9620         * postscript.c: Continued development.  Now links but doesn't make
9621         any marks on the page.  Lotsa bugs I suppose.
9622
9623         * str.c: (strcasecmp) [!HAVE_STRCASECMP] New function.
9624
9625         * str.h: Comment changes.
9626
9627 Sat Jul 27 22:32:38 1996  Ben Pfaff  <blp@gnu.org>
9628
9629         * Removed dependencies on non-nested comments in several files.
9630         Also removed references to (unix || __unix__) in #if's since
9631         prefh.orig makes those two equivalent.
9632         
9633         * ascii.c: (ascii_open_global) Creates ascii_arena.
9634         (ascii_close_global) Destroys ascii_arena.
9635         (ascii_init_driver) Doesn't create ascii_arena.
9636         (ascii_copy_driver) Removed.
9637         (ascii_option) Possible bugfix regarding %s vs. %.*s with a_string's.
9638         (outp_class ascii_class) Removed ascii_copy_driver reference.
9639
9640         * frequencies.q: Now can display all statistics except median.
9641         Still not finished.
9642
9643         * output.c: Handles outp_class.ref_count so output class
9644         destructors are called properly.
9645         (add_class) Sets ref_count to 0.
9646         (configure_driver) Initializes class if ref_count++ is 0.
9647         (destroy_driver) Destructs class if --ref_count is 0.  Frees the
9648         class output file name.
9649         
9650         * output.h: (struct outp_class) Removed copy_driver, inited.
9651         Added ref_count.
9652
9653         * postscript.c: Completely replaced but not finished.
9654         
9655 Tue Jul 23 21:48:36 1996  Ben Pfaff  <blp@gnu.org>
9656
9657         * approx.h: #includes <float.h>.
9658
9659         * arena.h, arena.c: Many functions changed to take an arena **
9660         instead of an arena *, for consistency.  All callers changed.
9661         (arena_alloc) Now creates a new arena if passed *A that is NULL.
9662         (arena_destroy) Sets *A to NULL.
9663         
9664         * ascii.c: (delineate) Implements OUTP_T_VERT correctly.  Removed
9665         assertion that `width' be positive.
9666
9667         * command.c: Removed #if's from cmd_table.
9668         (walk_cmdtable_func) [0] New function (debug code).
9669         (init_cmd_parser) [0] Dumps out cmd_table (debug code).
9670         (parse_cmd) Doesn't return failure for unimplemented commands.
9671
9672         * common.h: (SYSMIS) Changed from DBL_MAX to -DBL_MAX.
9673         (SYSCODE) New constant macro.
9674
9675         * descript.q: Checks for positive n_variables before performing
9676         analysis.
9677
9678         * file-handle.q: (get_handle_by_filename) Bug fix: passes &f to
9679         avl_find instead of &fp as arg 2.
9680
9681         * frequencies.g, frequencies.q: Continued updating; now compiles &
9682         works again, but not complete.
9683
9684         * main.c: Changes to user messages.
9685
9686         * misc.c: (reverse) [0] New function.
9687
9688         * settings.h: Comment removed.  #includes "common.h".
9689
9690         * som.c: (som_set_null) New function.
9691         (som_set_value, som_set_string, som_set_text) More detailing
9692         assertions.
9693         (som_set_float) Implemented function.
9694         (dump_columnated_table) Bug fix regarding page breaks.
9695         (draw_cell) Bug fix regarding text that spilled out of a cell.
9696         (draw_intersection, draw_horz_rule, draw_vert_rule) No longer draw
9697         null lines.
9698         (get_cell_size) Support SCON_EMPTY cells.
9699         (get_table_size) When calculating rules' widths and heights, mask
9700         out SLIN_SPACING bit.  Added SOPT_X_HLTL support.
9701         
9702         * som.h: (som_any_cell) New option SOPT_X_HTLT.  Removed
9703         SOPT_X_SHADE.
9704         (struct som_submission_form) New member `header'; all users
9705         changed.
9706
9707         * val-labs.c: (get_label) User messages changed.
9708
9709         * var.h: Changed FREQUENCIES structures.
9710
9711         * vars-atr.c: (is_num_user_missing, is_str_user_missing) Made
9712         inline.
9713         
9714 Fri Jul 19 19:11:13 1996  Ben Pfaff  <blp@gnu.org>
9715
9716         * approx.h: Definition of EPSILON now depends on system's
9717         DBL_EPSILON.  Removed GNU C specific code.
9718         (cmpapx) Renamed approx_compare.
9719
9720         * frequencies.g, frequencies.q: Continued updating; still doesn't
9721         compile.
9722
9723         * groff-font.c: (name_to_index) Fix bug that kept it from
9724         compiling.
9725
9726         * hash.c, hash.h: Completed work.
9727
9728         * var.h: Changes to freq_tab, frequencies_proc.
9729         
9730 Wed Jul 17 21:23:36 1996  Ben Pfaff  <blp@gnu.org>
9731
9732         New hashing code.
9733         * hash.c, hash.h: New files.  Not completed.
9734         * Makefile.am: Added hash.c to source file list.
9735         * font.h: (struct font_desc) New member kern_size_p.
9736         * groff-font.c: Uses hash.h.
9737         (hashpjw) Moved to hash.c.
9738         (next_prime_power) Rewrote, renamed hsh_next_prime, moved to
9739         hash.c.
9740         (static var hash) New member size_p.
9741         * var.h: Includes hash.h.
9742         (struct freq_tab) Changed AVL_TREE to hash_tab.
9743
9744         * vars-prs.c: Comment, formatting fixes.
9745
9746         * frequencies.g, frequencies.q: Continued updating.  Not yet
9747         working.
9748
9749         * formats.c: Bug fix.
9750
9751 Tue Jul 16 22:10:04 1996  Ben Pfaff  <blp@gnu.org>
9752
9753         Increasing parallelism between DESCRIPTIVES and FREQUENCIES.
9754         * descript.g: Comment fixes.
9755         * descript.q: Comment fixes.  Moved some declarations into var.h.
9756         Made dsc_info a static table.  Updated FIXMEs.
9757         (internal_cmd_descriptives) Beautified.
9758         
9759         * frequencies.q: Started updating into working order.
9760         * frequencies.g: New file analogous to descript.g.
9761         * var.h: Comment fixes.  Added structures for FREQUENCIES.
9762         
9763         * som.c: Removed vestiges of crushing and partial table support.
9764
9765 Sun Jul 14 15:45:31 1996  Ben Pfaff  <blp@gnu.org>
9766
9767         * Many more changes to som.c especially, but these will not be
9768         documented as I have resolved to remove them.  This patchlevel is
9769         being released solely so that I can fall back to it if I decide
9770         that removing the changes is not a good idea.
9771
9772 Sat Jul 13 09:58:44 1996  Ben Pfaff  <blp@gnu.org>
9773
9774         * som.c: (global var som) New member `cum_y'.
9775         (build_target) Properly handles titles for partial tables.
9776         (dump_partial_beg, dump_partial_mid, dump_partial_end)
9777         Merged into single new function dump_partial().  Fixed problem
9778         with titles on partial tables.
9779         (dump_table) Calls dump_partial() for all parts of partial tables.
9780         (dump_page) Criteria for drawing title changed.
9781         
9782 Fri Jul 12 22:03:36 1996  Ben Pfaff  <blp@gnu.org>
9783
9784         * command.c: (cmd_table) Added LIST, WEIGHT.
9785
9786         * command.c: (cmd_remark) No longer frees `s' since it's not
9787         dynamically allocated.
9788         
9789         * data-out.c: (convert_f) Now correctly handles the case where
9790         abs(v->f)<1 but v->f rounds to a value of 1.00 given the specified
9791         number of decimals.
9792         (som_destroy_all_tables) Removed argument.  All callers changed.
9793         (som_vline, som_hline) Argument validity checking corrected.
9794         (som_set_value) Implemented half-heartedly.
9795         (replicate_table) Copies tables piece-by-piece when using Checker.
9796
9797         * som.h: New line style SLIN_1THIN, currently equivalent to
9798         SLIN_0.  New enum set SOM_SUB_*.
9799         (struct som_submission_form) Removed `seq_no'.  Added `type'.
9800         
9801         * list.q: Newly working file; uses partial tables.
9802         
9803         * som.c: (som_reduce_table) Renamed som_set_table_height().
9804         (som_crush) Removed argument `group'.
9805         (global var som) Removed `nt', `seq_no'.  Added `type'.
9806         (som_submit_table) Arguments changed.
9807         (output_table) Removed partial table code.
9808         (build_target) New arg; partial table support added.  All callers
9809         changed.
9810         (dump_plain_table) Removed partial table code.
9811         (dump_partial_beg, dump_partial_mid, dump_partial_end) New functions.
9812         (dump_table) Supports partial tables.
9813         (dump_page) New argument to allow not drawing top and/or bottom
9814         headers.  All callers changed.  Supports partial tables.
9815
9816 Sat Jul  6 22:22:25 1996  Ben Pfaff  <blp@gnu.org>
9817
9818         * data-out.c: Changed `#include <approx.h>' to `#include
9819         "approx.h".
9820         (convert_F) Comment fix.  Now won't print `-.000', etc.
9821
9822         * descript.q: Now Z-scores work, although there appears to
9823         be a bug (which might actually be in data-out.c:convert_F()).
9824         (descriptives_trns_proc, descriptives_trns_free) New functions.
9825         (run_z_pass) Implemented.
9826         
9827         * var.h: Comment fixes.
9828         (dsc_z_score, descriptives_trns) New structs.
9829         (descriptives_trns) Added to any_trns as `dsc'.
9830
9831         * error.c, error.h: New error class, IS (Installation Script
9832         error), used in those instances where the error is in the
9833         installation, but there is a script file or installation file that
9834         can be usefully referred to.
9835         
9836         * output.c: Change many IE classes to IS classes.
9837
9838         * cases.c, command.c, common.c, crosstabs.q, expr-evl.c,
9839         frequencies.q, list.q, vars-prs.c, vfm.c: Removed reference to
9840         HAVE_MALLOC_H because Borland C++ alloca() is broken, so why
9841         include the corresponding header?
9842         
9843         * glob.c: (init_glob) Don't malloc term_buffer under Checker.
9844         Don't bail out if termcap can't be read.
9845
9846         * som.c: (som_destroy_table) Removed.
9847         (som_reduce_table, som_destroy_all_tables) New functions.
9848         (som_crush) New function, not implemented.
9849         
9850         * som.h: New table option STAB_CRUSH.  Comment fix.  New struct
9851         som_submission_form.  Function prototypes revised.
9852
9853         Outputting huge tables (1000s of rows) a few rows at a time
9854         is supported, though untested.  May even break everything.
9855         Actually, the code doesn't even compile right now.
9856         * som.c: (struct som) New fields htv, nt, seq_no.
9857         (som_submit_table) Multiple arguments changed to a single
9858         pointer to struct submission_form.  Only increments subtable_num
9859         if seq_no is zero.  Only destroys table if it's not going to
9860         be reused.
9861         (replicate_table) New function.
9862         (output_table) Comment fix.
9863         (examine_table) Changed inline code to code calling
9864         replicate_table().  Calculates htv.  Supports partial tables.
9865         (draw_title) Removed comment.
9866         (build_target) Only allows for title on first part of partial
9867         tables.
9868         (dump_plain_table) Only resets table chunk number on first part
9869         of partial tables; FIXME: doesn't work quite right.  Supports
9870         partial tables.
9871         (dump_page) Titles only on first part of partial tables.
9872
9873 Fri Jul  5 20:16:19 1996  Ben Pfaff  <blp@gnu.org>
9874
9875         * Thanks to an unreliable IDE hard drive, I have spent the last
9876         day reconstructing my Debian GNU/Linux installation and redoing
9877         the previous day's changes--somehow I managed to save every file
9878         except for output.c and output.h.  So the following changes could
9879         really be considered independent of the output.c, output.h changes
9880         from Jul 4.
9881
9882         * output.h, output.c: Moved the outp_configure_vec global var,
9883         outp_names struct, and enum set OUTP_S_* from output.h to output.c.
9884         outp_configure_vec is now static.
9885         
9886 Thu Jul  4 20:20:24 1996  Ben Pfaff  <blp@gnu.org>
9887
9888         * The entire philosophy behind configuration of the output drivers
9889         changed.  Now there is a termcap-type configuration where drivers
9890         to be read are determined beforehand, rather than parsing the
9891         entire output init file and storing it in memory & deciding what
9892         to actually use later.  Faster & more memory-efficient at the same
9893         time, cool.
9894         
9895         * output.c: Comment fix.  Removed outp_init_drivers global var.
9896         Removed all references to synonyms.  New structure outp_defn.  New
9897         global vars outp_macros, outp_configure_vec.
9898         (search_name, delete_name, add_name, check_configure_vec,
9899         expand_name, find_defn_value) New static functions.
9900         (outp_configure_clear, outp_configure_add, outp_configure_macro,
9901         outp_read_devices) New extern functions.
9902         (outp_init) Much functionality moved into outp_read_devices.
9903         (outp_read_devices) Format of output init file changed; name of
9904         file is `devices' rather than `output' to avoid Makefile
9905         conflicts.
9906         (outp_clear) Renamed outp_done.
9907         (outp_list_classes) Bug fix, cleaned up.
9908         (outp_list_drivers) Not implemented anymore.
9909         (outp_configure_driver) Now a static function; simplified; now
9910         interpolates macros; supports new structure.
9911         (outp_enable_driver, match_synonym) Removed; all references
9912         removed.
9913         (find_driver) First argument removed.
9914         
9915         * output.h: Global var outp_init_drivers removed; new structure
9916         outp_names; new enum set OUTP_S_*; new global var
9917         outp_configure_vec; function prototypes for output.c exports
9918         updated.
9919         
9920         * main.c: (main) Calls outp_read_devices() after parsing the
9921         command line.
9922         
9923         * cmdline.c: (parse_command_line) New option -v --verbose;
9924         --version changed to -V.  --device option changed syntax to just
9925         take a single device name.  Accepts key=value declaration of
9926         output init file macros.  Syntax message updated.
9927
9928         * filename.c: (expand_line) New function.
9929         (interp_environ_vars) Renamed interp_vars; no longer uses
9930         fixed-size buffer.
9931         (blp_getenv) Allows $ARCH and $VER pseudo-environment-vars to be
9932         overridden by real environment vars.
9933         (search_path) Uses verbose_msg() instead of #ifdef'd printf().
9934         * filename.h: interp_environ_vars() renamed interp_vars().
9935         
9936         * error.c, error.h: Added extern variable `verbosity', message
9937         class MM.
9938         
9939         * error.c: (vmsg) Support message class MM.
9940         (verbose_msg) New function.
9941
9942         * descript.q: (generate_z_varname) Bug fix in generation of
9943         Z-score varnames.
9944         (dump_z_table) Bug fix in column headers.
9945         
9946         * ascii.c: (ascii_init_driver) Changed minimum number of lines per
9947         page from 29 to 15.  Don't set a default for ops[OPS_INIT,
9948         OPS_DONE].  Writes the uninit string when the driver is closed.
9949         (ascii_open_page) Write the init string before the first page.
9950         (output_shorts) Form of main loop changed from `while' to `for'.
9951         Bug fix with overstrikes: the character is printed *after* the
9952         backspace.  Eliminated a lot of `& 0xff' modifiers.
9953         (advance_to_left_margin) New function.
9954         (return_carriage, output_lines) Handle left margin.
9955
9956 Thu Jul  4 00:35:59 1996  Ben Pfaff  <blp@gnu.org>
9957
9958         * ascii.c: New option `carriage-return-style'.
9959
9960         * ascii.c: (count_fancy_chars) New function.
9961         (delineate, text_metrics) Use new function; bug fixes regarding
9962         rich text strings.
9963         (text_draw) Bug fix with rich text.
9964         (output_string, output_shorts) Reordered.
9965         (output_shorts) Now handles boxchars and some overstrike font
9966         changes.
9967         (output_char, return_carriage) New functions.
9968         (output_lines) Now handles overstriking and font changes properly;
9969         some code moved to output_shorts.
9970
9971 Tue Jul  2 22:13:23 1996  Ben Pfaff  <blp@gnu.org>
9972
9973         [GLOBAL_DEBUGGING]
9974         * ascii.c: New member `debug' in ascii_driver_ext.
9975         (ascii_init_driver, delineate) Uses new member.
9976
9977         Now you can set a vertical height on writing text.
9978         * ascii.c: (delineate) Keeps track of vertical position.
9979         (text_draw) No longer considers fully justified text an internal
9980         error.
9981         
9982         * output.h: New flag OUTP_T_VERT; other OUTP_T_ values changed.
9983
9984         Tables' titles are drawn; they can have variable height.
9985         * som.c: `som' struct has new member, title_height.
9986         (draw_title) New argument.  Moved within file.  All caller
9987         changed.
9988         (build_target) New argument, amount of space needed for first row.
9989         Calculates height of title, takes that into account.  All callers
9990         changed.
9991         (dump_plain_table, dump_columnated_table) Took calculation of y1,
9992         y2 out of loop.
9993         (dump_columnated_table) [GLOBAL_DEBUGGING] Debugging code
9994         improved.
9995         (dump_columnated_table) Organized for readability.
9996         (dump_page) Makes use of som.title_height.
9997
9998         * som.c: Many comment bug fixes.
9999
10000         * descript.q: (try_name, generate_z_name) Bug fix regarding
10001         generation of Z-score variable names.
10002         * var.h: Removed num from descriptives_proc; all referents removed.
10003
10004 Mon Jul  1 22:13:39 1996  Ben Pfaff  <blp@gnu.org>
10005
10006         * ascii.c: (ascii_line_horz, ascii_line_vert,
10007         ascii_line_intersection) Added debugging code.
10008
10009         Added a descriptive line above each table to describe it.
10010         * command.c: (parse_cmd) Calls som_new_series.
10011         
10012         * som.c: New static vars table_num, subtable_num.  New `som'
10013         member `title'.
10014         (dump_page) New arguments.
10015         (som_submit_table) Handle new variables.
10016         
10017         * som.c, som.h: (som_submit_table) New arguments.  All callers
10018         changed.
10019         (som_new_series) New function.
10020         (build_target) Makes room for extra line.
10021         (draw_title) New function.
10022         (dump_page) Calls draw_title.  Bug fix: doesn't always set
10023         som.ext->cp to 0.
10024         
10025         Columnation of tables support.
10026         * som.h: Deleted fr, lr, ri from som_table.  Reorganized.
10027         
10028         * som.c: Deleted references to fr, lr, ri.
10029         (som_columnate) Bux fix: sets group member of table.
10030         (som_add_options) Function removed.
10031         (dump_table) Split into three functions; extensively reworked.
10032         
10033         * descript.q: (dump_z_table) Better output table formatting; added
10034         title support to correspond to som.h changes.
10035         (display) Title support.
10036
10037         * output.h: Added OUTP_T_NONE.
10038         
10039 Mon Jul  1 13:00:00 1996  Ben Pfaff  <blp@gnu.org>
10040
10041         * descript.q: Improved handling of Z scores; still not perfect.
10042         
10043         * output.h, ascii.c: Added hook for getting em width of current
10044         font.
10045         
10046         * som.c: Uses new em-width hook.  Added debugging code to
10047         several functions.
10048         (som_columnate) New argument.
10049         (som_add_options) Removed.
10050
10051 Jun 29 17:40:47 1996  Ben Pfaff  <blp@gnu.org>
10052
10053         * som.h, som.c, output.c, output.h, ascii.c: Updated to work with
10054         rules as a property of the table instead of as a property of the
10055         cells.
10056         
10057         * ascii.c: Added `header' to table of options.
10058         
10059         * descript.q: Added even shorter statistic names; modified to work
10060         with new som interface.
10061         
10062         * misc.c (blp_getdelim): Bug fix.
10063         
10064         * version.c: includes 'conf.h'.
10065         
10066 ----------------------------------------------------------------------
10067 Local Variables:
10068 mode: change-log
10069 version-control: never
10070 End: