0d65dcd8ac2617801c62312bf53d1fef1414b62f
[pspp-builds.git] / src / ChangeLog
1 Sat Oct 29 16:25:36 2005  Ben Pfaff  <blp@gnu.org>
2
3         * count.c: Major cleanups.  Rename practically everything.
4         Rewrite much of the code.  Use pools for memory management.  Use
5         the new parse_num_range().
6
7         * mis-val.c: (cmd_missing_values) Use the new parse_num_range().
8         (parse_number) Removed.
9
10         * missing-values.c: (mv_add_num_range) Don't add out-of-order
11         ranges, e.g. where low > high.
12
13         * pool.c: (pool_2nrealloc) New function.
14
15         * range-prs.c: New file.
16         (parse_num_range) New function.
17         (parse_number) New function.
18         
19 Fri Oct 28 22:47:48 2005  Ben Pfaff  <blp@gnu.org>
20
21         Fix up potential overflows in size calculations by replacing
22         instances of pool_alloc(p, x * sizeof *y) by pool_malloc(p, x,
23         sizeof *y) everywhere I could find them.  Similarly by
24         pool_malloc(), pool_realloc().
25         (Order is important: pool_alloc(p, sizeof *y, x) will divide by 0
26         if x is 0.)
27
28         * pool.c: (pool_nalloc) New function.
29         (pool_nmalloc) New function.
30         (pool_nrealloc) New function.
31
32 Thu Oct 27 11:16:53 WST 2005 John Darrington <john@darrington.wattle.id.au>
33
34         Separated the definition of a file handle object from the stuff 
35         pertaining to the FILE HANDLE command.
36
37         * file-handle-def.[ch]: New files.
38
39         * dfm-read.c file-handle.h file-handle.q
40         
41 Tue Oct 25 21:56:23 2005  Ben Pfaff  <blp@gnu.org>
42
43         Fix up potential overflows in size calculations by replacing
44         instances of xmalloc(x * sizeof *y) by xnmalloc(x, sizeof *y)
45         everywhere I could find them.  Similarly by xrealloc(), malloc().
46         (Order is important: xnmalloc(sizeof *y, x) will divide by 0 if x
47         is 0.)
48
49         * alloc.c: (nmalloc) New function.
50         (out_of_memory) Removed.  Replaced references by xalloc_die().
51
52         * sort.c: (allocate_cases) Fix segfault if memory allocation
53         fails.
54
55         * subclist.c: (subc_list_double_create) Use xnmalloc() instead of
56         malloc().
57         (subc_list_double_push) Use xnrealloc() instead of realloc().
58
59 Wed Oct 26 08:43:51 WST 2005 John Darrington <john@darrington.wattle.id.au>
60
61         Dictionary abstraction part #2
62
63         * algorithm.c format.c str.c sysfile-info.c val.h var.h vars-atr.c:
64           Removed unnecessary #include directives
65
66 Mon Oct 24 21:35:08 2005  Ben Pfaff  <blp@gnu.org>
67
68         * groff-font.c (font_msg): Use err_vmsg() instead of incorrectly
69         trying to pass a va_list to tmsg().  Thanks to Jason Stover for
70         reporting this bug.
71
72 Mon Oct 24 21:24:15 2005  Ben Pfaff  <blp@gnu.org>
73
74         Work to get rid of GCC 4.0 warnings, part 2.
75
76         In many files, change `unsigned char' to `char'.  This often
77         requires adding casts to <ctype.h> functions.
78
79         * data-in.c: (parse_A) Use buf_copy_rpad().
80
81         * str.c: (str_copy_buf_trunc) New function.
82
83         * value-labels.c: (value_to_string) Fix mistaken use of strncpy(),
84         by rewriting.
85
86 Mon Oct 24 13:42:32 WST 2005 John Darrington <john@darrington.wattle.id.au>
87
88         Moved some definitions to make it easier to abstract a dictionary 
89         from the rest of PSPP.
90
91         * format-prs.c lex-def.[ch]:  New files.
92
93         * Makefile.am lexer.[ch] dictionary.c vars-atr.c vfm.c algorithm.c 
94           format.c:  Moved some functions between modules.
95         
96 Sun Oct 23 19:28:08 2005  Ben Pfaff  <blp@gnu.org>
97
98         Work to get rid of GCC 4.0 warnings, part 1.
99         
100         In many files, change count parameters to parse_variables(),
101         etc. from `int' to `size_t'.  Also change related variables and
102         struct members.  Also change messages as needed (e.g. %d to %u
103         with cast to unsigned).  Also change arithmetic as necessary
104         (e.g. n >= m - 1 to n + 1 >= m). 
105
106         * crosstabs.q: (crs_custom_tables) Check for size_t overflow in
107         multiplication.
108
109         * q2c.c: (dump_declarations) Generate code for size_t instead of
110         int.
111         
112 Thu Oct 20 18:18:40 2005  Ben Pfaff  <blp@gnu.org>
113
114         * output.c: (outp_read_devices) Fix message.
115
116 Sat Sep 17 11:13:13 2005  Ben Pfaff  <blp@gnu.org>
117
118         * matrix-data.c: (cmd_matrix_data) Change type of variable whose
119         address is passed to dict_get_vars() from size_t to int to match
120         John's change below.
121
122         * modify-vars.c: (validate_var_modification) Ditto.
123
124 Mon Sep 12 19:26:06 WST 2005 John Darrington <john@darrington.wattle.id.au>
125
126         * dictionary.[ch]  Changed cnt from size_t* to int* since that's
127         what it's called as, and on  x86_64 machines they're different sizes.
128         
129         * str.c: (ds_vprintf) Copied va_list args so they can be re-used
130         
131 Sun Aug 21 00:12:24 2005  Ben Pfaff  <blp@gnu.org>
132
133         * lexer.c: (lex_sbc_only_once) New function.
134         (lex_sbc_missing) New function.
135
136 Sun Aug 21 00:00:47 2005  Ben Pfaff  <blp@gnu.org>
137
138         * case.h: (case_str) Make it return `unsigned char'.
139
140 Sat Aug 20 23:56:14 2005  Ben Pfaff  <blp@gnu.org>
141
142         Revamp SAVE, XSAVE, EXPORT.  Add (or at least parse) all the
143         subcommands that we didn't support.  Fix bug 13911.  Fix bug
144         reported by Adam Pierson (COMPRESSED and other subcommands didn't
145         work on SAVE).  Refactor all related code.
146         
147         * command.def: Add XEXPORT command.
148
149         * dictionary.c: (dict_delete_scratch_vars) New function.
150
151         * get.c: (cmd_get) Fix parsing.
152         (struct save_trns) Removed.
153         (cmd_save_internal) Removed.
154         (cmd_save) Removed.
155         (do_write_case) Removed.
156         (save_write_case_func) Removed.
157         (save_trns_proc) Removed.
158         (save_trns_free) Removed.
159         (trim_dictionary) Removed.
160         (struct export_proc) Removed.
161         (cmd_export) Rewrote.
162         (export_write_case_func) Removed.
163         (export_proc_free) Removed.
164         (enum writer_type) New enum.
165         (enum command_type) New enum.
166         (struct any_writer) New struct.
167         (any_writer_destroy) New function.
168         (parse_write_command) New function.
169         (any_writer_write_case) New function.
170         (parse_output_proc) New function.
171         (output_proc) New function.
172         (cmd_save) Rewrote.
173         (cmd_xsave) Rewrote.
174         (struct output_trns) New struct.
175         (parse_output_trns) New function.
176         (output_trns_proc) New function.
177         (output_trns_free) New function.
178         (cmd_xsave) Rewrote.
179         (cmd_xexport) New function.
180         (parse_dict_trim) New function.
181         (struct mtf_proc) Change `by_cnt' member type to `int'.
182         (cmd_import) Rewrote.
183
184         * pfm-write.c: (struct pfm_writer) Add `digits' member.
185         (pfm_writer_default_options) New function.
186         (pfm_open_writer) Add `opts' argument and handle options.
187         (write_float) Write only as many digits as `digits' member says.
188         (format_trig_double) Limit base-10 precision to LDBL_DIG.
189
190         * pfm-write.h: (enum pfm_type) Moved here from pfm-read.h.
191         (struct pfm_write_options) New struct.
192
193         * sfm-write.c: (sfm_writer_default_options) New function.
194         (sfm_open_writer) Remove `compress', `omit_long_names' args.  Add
195         `opts' argument.  Implement options.
196
197         * sfm-write.h: (struct sfm_write_options) New struct.
198
199         * expressions/helpers.c: (copy_string) Make `old' arg `unsigned
200         char *' instead of `char *'.
201         
202 Sat Aug  6 21:29:15 2005  Ben Pfaff  <blp@gnu.org>
203
204         * factor_stats.c: Needed <config.h> included earlier.
205
206         * percentiles.c: Needed to include <config.h>.
207
208         * val.h: Don't include "config.h".
209
210 Sat Aug  6 21:26:27 2005  Ben Pfaff  <blp@gnu.org>
211
212         Clean up treatment of missing values by moving all the code into
213         one place.  All references to the missing value function were
214         updated, but only major changes are detailed below.
215
216         * Makefile.am: Add missing-values.c, missing-values.h to sources.
217
218         * apply-dict.c: (cmd_apply_dictionary) Use mv_resize().
219
220         * dictionary.c: (dict_create_var) Initialize `miss' member with
221         mv_init().
222         (dict_clone_var) Copy `miss' member with mv_copy().
223         
224         * get.c: (mtf_merge_dictionary) Use mv_copy().
225
226         * missing-values.c: New file.
227         
228         * missing-values.h: New file.
229
230         * mis-val.c: Rewrite.  New version implements updated semantics.
231
232         * pfm-read.c: (read_variables) Rewrite missing value handling.
233
234         * pfm-write.c: (write_variables) Rewrite missing value handling.
235
236         * sfm-read.c: (read_variables) Rewrite missing value handling.
237
238         * sfm-write.c: (write_variable) Rewrite missing value handling.
239
240         * sfmP.h: Include "magic.h" to get definition of
241         second_lowest_value.
242
243         * sysfile-info.c: (describe_variable) Rewrite missing value
244         handling.
245
246         * val.h: Include "magic.h" to get definition of
247         second_lowest_value.
248
249         * var.h: Include "missing-values.h".  Drop MISSING_* enums.
250         (struct variable) Remove `miss_type', `missing'.  Add `miss'.
251
252         * vars-atr.c: (is_num_user_missing) Removed--use
253         mv_is_num_user_missing().
254         (is_str_user_missing) Removed--use mv_is_str_user_missing().
255         (is_system_missing) Removed--use mv_is_value_system_missing().
256         (is_missing) Removed--use mv_is_value_missing().
257         (is_user_missing) Removed--use mv_is_value_user_missing().
258         
259 Sun Jul 31 14:09:57 2005  Ben Pfaff  <blp@gnu.org>
260
261         Adopt use of gnulib for portability.
262
263         * Make.build: Add $(top_srcdir)/gl and $(top_builddir)/gl to
264         include path.
265
266         * Makefile.am: Remove bool.h, stat.h and change getline.[ch] to
267         getl.[ch] in pspp_SOURCES.  Remove libmisc, add libgl in
268         pspp_LDADD.
269
270         * In many source files, added an explicit inclusion of gettext.h
271         and definition of _ macro.  These are no longer in pref.h because
272         it interfered with definitions in a few gnulib source files.
273
274         * In many source files, changed #include "bool.h" to #include
275         <stdbool.h>, which is provided by gnulib.
276
277         * alloc.c: Removed functions defined in gnulib:
278         (xmalloc) Removed.
279         (xcalloc) Removed.
280         (xrealloc) Removed.
281         (xstrdup) Removed.
282         (out_of_memory) Redefined as wrapper for xalloc_die().
283
284         * alloc.h: Replace prototypes by #include "xalloc.h".
285
286         * casefile.c: Use full_read() and full_write() from gnulib instead
287         of our home-grown versions.
288         (full_read) Removed.
289         (full_write) Removed.
290
291         * getline.c: Renamed getl.c.
292
293         * getline.h: Renamed getl.h, updated all references.
294
295         * filename.c: (fn_readlink) Change to wrapper around xreadlink()
296         from gnulib.
297
298         * glob.c: Just #include <time.h> instead of the crazy rigmarole
299         here before.
300         (init_glob) Call set_program_name() to initial gnulib progname
301         module.
302
303         * html.c: (postopen) Use getlogin_r(), gethostname() from gnulib.
304
305         * permissions.c: Use "stat-macros.h" from gnulib.
306
307         * postscript.c: Just #include <time.h> instead of the crazy
308         rigmarole here before.
309
310         * q2c.c: (main) Make generated code #include "gettext.h".
311
312         * str.h: Get rid of most explicit declarations of standard
313         functions, in favor of including gnulib header files.
314
315         * expressions/evaluate.c: Ditto.
316
317         * expressions/operations.h.pl: Make generated code #include
318         <stdbool.h>, not "bool.h".
319
320 Sat Jul 30 23:13:17 2005  Ben Pfaff  <blp@gnu.org>
321
322         * expressions/parse.c: (validate_function_args) Fix two msg() bugs
323         found by -Wformat.
324
325 Sat Jul 30 23:10:01 2005  Ben Pfaff  <blp@gnu.org>
326
327         * expressions/evaluate.c: (expr_debug_print_postfix) Don't pass
328         null pointer to printf for %.*s.
329
330 Sat Jul 30 23:05:33 2005  Ben Pfaff  <blp@gnu.org>
331
332         * vars-atr.c: (var_is_valid_name) Fix three msg() bugs found by
333         -Wformat.
334
335 Sat Jul 30 22:58:33 2005  Ben Pfaff  <blp@gnu.org>
336
337         * rank.q: (parse_rank_function) Fix msg() bug found by -Wformat.
338
339 Sat Jul 30 22:56:12 2005  Ben Pfaff  <blp@gnu.org>
340
341         * postscript.c: (postopen) Cast `char' to `unsigned char' before
342         passing to isspace().
343
344 Sat Jul 30 22:52:09 2005  Ben Pfaff  <blp@gnu.org>
345
346         * pfm-read.c: (read_variables) Fix msg() bug found by -Wformat.
347
348 Sat Jul 30 22:50:57 2005  Ben Pfaff  <blp@gnu.org>
349
350         * histogram.c: Include <config.h>.
351
352 Sat Jul 30 22:48:50 2005  Ben Pfaff  <blp@gnu.org>
353
354         * get.c: (cmd_match_files) Fix msg() bug found by -Wformat.
355
356 Sat Jul 30 22:46:10 2005  Ben Pfaff  <blp@gnu.org>
357
358         * format.c: (check_common_specifier) Fix msg() bug found by
359         -Wformat.
360         (check_output_specifier) Ditto.
361
362 Sat Jul 30 22:43:57 2005  Ben Pfaff  <blp@gnu.org>
363
364         * file-handle.q: (cmd_file_handle) Fix msg() bug found by
365         -Wformat.
366
367 Sat Jul 30 22:41:44 2005  Ben Pfaff  <blp@gnu.org>
368
369         * data-in.c: (parse_Z) [WORDS_BIGENDIAN] Don't declare buf[], to
370         avoid "unused variable" warning.
371
372 Sat Jul 30 22:38:46 2005  Ben Pfaff  <blp@gnu.org>
373
374         * command.c: (find_word) Cast `char' to `unsigned char' before
375         passing to isspace().
376
377 Sat Jul 30 22:36:29 2005  Ben Pfaff  <blp@gnu.org>
378
379         * case.c: (case_compare) Implement as delegating to
380         case_compare_2dict().
381
382 Sat Jul 30 22:34:18 2005  Ben Pfaff  <blp@gnu.org>
383
384         * algorithm.c: Inclusion of <alloca.h> is unneeded.
385
386 Sat Jul 30 22:01:32 2005  Ben Pfaff  <blp@gnu.org>
387
388         * Make.build: Don't append -ansi to AM_CFLAGS for GCC.  Using
389         -ansi changes the behavior of header files significantly.  It
390         causes __STRICT_ANSI__ to be defined, and some headers interpret
391         that as cause to e.g. not use `long long' or __attribute__.  The
392         former example is bad when off_t is supposed to be `long long',
393         and the latter prevents -Wformat from working.
394
395 Sun Jul 24 20:26:59 2005  Ben Pfaff  <blp@gnu.org>
396
397         Get rid of dependency on libgmp by writing our own routine for
398         floating-point base conversion.
399
400         * pfm-write.c: (write_float) Rewrote.
401         (write_int) Rewrote.
402         (pow30_nonnegative) New function.
403         (pow30) New function.
404         (trig_to_char) New function.
405         (format_trig_digits) New function.
406         (recurse_format_trig_int) New function.
407         (format_trig_int) New function.
408         (should_round_up) New function.
409         (try_round_up) New function.
410         (format_trig_double) New function.
411
412 Sun Jul 24 18:49:20 2005  Ben Pfaff  <blp@gnu.org>
413
414         * data-in.c: (parse_numeric) Allow "1+23" even for F format, for
415         compatibility.
416
417 Sun Jul 24 18:47:37 2005  Ben Pfaff  <blp@gnu.org>
418
419         * pfm-read.c: (read_version_data) Read and ignore author field.
420
421 Wed Jul  6 20:44:27 2005  Ben Pfaff  <blp@gnu.org>
422
423         * get.c: (mtf_processing) Don't assume that
424         mtf_compare_BY_values() always returns -1, 0, or 1.  Actually, it
425         returns a negative, zero, or positive result.  Fixes MATCH FILES
426         bug on Mac OS X reported by "Marshall DeBerry" <mdb@radix.net>.
427
428 Mon Jul  4 18:01:15 2005  Ben Pfaff  <blp@gnu.org>
429
430         * flip.c: [HAVE_SYS_TYPES_H] Really include <sys/types.h>.  The
431         preprocessor test for sys/types.h was accidentally inverted.  This
432         was bug 12789.
433
434 Sun Jul  3 22:47:39 2005  Ben Pfaff  <blp@gnu.org>
435
436         * get.c: (cmd_match_files) Fix memory leak on `by' and on
437         `vfm_source'.
438
439         * getline.c: [HAVE_LIBREADLINE] (read_console) Fix memory leak on
440         `line'.
441
442         * vfm.c: (close_active_file) Remove unnecessary test.
443
444 Sun Jul  3 21:45:32 2005  Ben Pfaff  <blp@gnu.org>
445
446         Fix NDEBUG compile errors.
447
448         * hash.h: Needed explicit #include <assert.h>.
449
450         * linked-list.c: (ll_next) First arg is UNUSED when NDEBUG is
451         defined.
452
453 Sun Jun 12 23:44:38 2005  Ben Pfaff  <blp@gnu.org>
454
455         Implement embedding for PostScript driver.  Fixes bug 12970.
456
457         * ascii.c: Fix compiler warnings.
458
459         * html.c: Ditto.
460
461         * chart.h: Add `file' member.
462
463         * output.h: (struct outp_class) initialise_chart, finalise_chart
464         should take outp_driver *, not outp_class *.  Update all
465         references.
466
467         * plot-chart.c: (chart_create) Fix segfault when there are no
468         output drivers at all.
469         (chart_submit) Call d->class->finalise_chart.
470
471         * postscript.c: (ps_open_page) Set cp_y to 0.
472         (ps_submit) New function.
473         (ps_chart_initialise) Implement.
474         (ps_chart_finalise) Implement.
475         (static var postscript_class) Add ps_submit.
476         (static var epsf_class) Add ps_submit.
477         
478
479 Sun Jun 12 14:54:40 2005  Ben Pfaff  <blp@gnu.org>
480
481         Did some more work on bug 12859 and then realized that a *good*
482         solution would require some fundamental restructuring.  For now,
483         I'm marking REPEATING DATA unimplemented, and then we can revisit
484         it post-0.4.0.
485         
486         * command.def: Make REPEATING DATA unimplemented.
487
488         * data-list.c: (cmd_repeating_data) Assume inline file is 80
489         characters wide.
490         (realize_value) Revert previous changes; no longer needed.
491         Updated all callers.
492
493         * error.c: (err_hcf) Set nfile_loc, mfile_loc to 0 after freeing
494         file_loc, to avoid bad references later.
495
496         * str.c: Fix typo.
497
498 Tue Jun  7 00:14:09 2005  Ben Pfaff  <blp@gnu.org>
499
500         Make some code tolerant of reentry.  Should not be needed if other
501         code is correct but it is good to be generally tolerant.
502         
503         * error.c: (err_hcf) Set file_loc to null after free().
504
505         * output.c: (outp_done) Similar changes.
506
507         * str.c: (ds_destroy) Ditto.
508         
509 Tue Jun  7 00:10:20 2005  Ben Pfaff  <blp@gnu.org>
510
511         Continue work on bug 12859, plus some code cleanup.
512         
513         * data-list.c: (cmd_repeating_data) Replace `seen' bitmap by
514         boolean variables.  Don't try to compute starts_end, cont_end for
515         inline file.  Calculate length only after parsing variable
516         specifications.  Add proper transformation to list.
517         (realize_value) If the rpd_num_or_var has no value, return new
518         DEFAULT_MEMBER argument (for use with inline file).
519         (repeating_data_trns_proc) Pass default values.
520
521         * dfm-read.c: (dfm_close_reader) Only skip data if *not* still
522         open, and only if we actually started reading data.
523
524 Sun Jun  5 18:39:36 2005  Ben Pfaff  <blp@gnu.org>
525
526         Fix bug 11894.
527         
528         * output.c: (outp_read_devices) Fix message.
529
530 Fri May 27 12:34:43 WST 2005 John Darrington <john@darrington.wattle.id.au>
531         
532         * sort-prs.[ch] (newfiles), aggregate.c, sort.[ch]: Separated the guts 
533         of the sort algorithm from the parser for the SORT command.
534         
535         * rank.q: Added the parser for the RANK command.
536         
537 Thu May 26 12:29:21 2005  Ben Pfaff  <blp@gnu.org>
538
539         Fix bug 13192.
540
541         * sort.c: (sort_parse_criteria) Only set *saw_direction if
542         saw_direction is non-null.  Thanks to John Darrington for
543         reporting this bug.
544
545 Tue May 24 21:52:55 2005  Ben Pfaff  <blp@gnu.org>
546
547         * get.c: (mtf_processing) Handle case of a lookup table as the
548         active file.  Thanks to John Darrington for reporting this bug.
549
550 Wed May 25 10:27:02 WST 2005 John Darrington <john@darrington.wattle.id.au>
551         
552         * alloc.c alloc.h: (xcalloc) changed signature to imitate the
553         POSIX  calloc function.
554         
555         * crosstabs.q get.c vars-prs.c: Updated calls to xcalloc to
556         reflect new signature.
557
558         * sfm-read.c: Now much more robust in the face of badly formed
559         system files.
560
561 Mon May 23 11:57:31 WST 2005 John Darrington <john@darrington.wattle.id.au>
562
563         *sfm-read.c: Fixed some bugs regarding long string continuation
564         records, which the previous fix uncovered.
565
566 Sat May 21 12:48:34 WST 2005 John Darrington <john@darrington.wattle.id.au>
567
568         * sfm-read.c, sfmP.h:  Allow reading of system files when the 
569         case_size value in the header is -1.  Also changed some Errors to 
570         Warnings when reading system files.
571
572 Tue May 17 21:00:57 2005  Ben Pfaff  <blp@gnu.org>
573
574         * data-list.c: (data_list_trns_free) Don't free the argument
575         because cancel_transformations() will do that itself.
576         (data_list_source_destroy) Destroy the argument to
577         data_list_trns_free(), because it no longer does so itself.
578
579 Tue May 17 18:29:35 2005  Ben Pfaff  <blp@gnu.org>
580
581         * data-out.c: (format_and_round) Don't output leading `-' if value
582         rounds to zero.
583
584 Tue May 17 00:06:43 2005  Ben Pfaff  <blp@gnu.org>
585
586         Fix bug 11119.
587
588         * som.c: (output_encodings) If some cell in the table won't fit
589         with the horizontal or vertical headers, cancel those headers.
590
591         * som.h: (struct som_table_class) Add fits_width, fits_length,
592         set_headers members.
593
594         * tab.c: (tabi_fits_width) New function.
595         (tabi_fits_length) New function.
596         (tabi_set_headers) New function.
597         (global var tab_table_class) Add the new functions as appropriate
598         members.
599         
600 Mon May 16 22:34:06 2005  Ben Pfaff  <blp@gnu.org>
601
602         Fix rest of bug 13054.
603
604         * format.def: Fix EDATE, SDATE, ADATE, JDATE, QYR, MOYR, WKYR,
605         DATETIME, TIME system/portable file values.
606
607 Mon May 16 22:31:15 2005  Ben Pfaff  <blp@gnu.org>
608
609         * data-list.c: (parse_free) Use make_input_format().
610         
611         * data-out.c: (num_to_string) Use make_output_format().
612
613         * dictionary.c: (dict_create_var) Ditto.
614
615         * format.c: (global var f8_2) New var.
616         (make_input_format) New function.
617         (make_output_format) New function.
618
619         * get.c: (cmd_match_files) Use make_output_format().
620
621         * list.q: (cmd_list) Ditto.
622
623         * matrix-data.c: Ditto.
624
625         * sfm-read.c: (parse_format_spec) Check output specifier
626         thoroughly.
627
628         * tab.c: (tab_float) Use make_output_format().
629
630 Sun May 15 23:38:10 2005  Ben Pfaff  <blp@gnu.org>
631
632         Fix more of bug 13054.
633         
634         * format.def: FMT_A should allow 255-character output.  FMT_AHEX
635         should allow 510-character input and output.
636
637         * data-out.c: (num_to_string) Get rid of NEW_STYLE option.
638         (convert_E) Handle non-finite values.
639         (try_F) Rewrite.
640         (format_and_round) New function.
641         (convert_infinite) New function used by try_F() and convert_E().
642
643 Sun May 15 23:36:55 2005  Ben Pfaff  <blp@gnu.org>
644
645         Regularize string and buffer function names so that they make some
646         kind of sense.
647
648         * str.c: (mm_reverse) Rename buf_reverse().  Update all
649         references.
650         (mm_find_reverse) Rename buf_find_reverse().  Update all
651         references.
652         (mm_case_compare) Rename buf_compare_case().  Update all
653         references.
654         (st_compare_pad) Rename buf_compare_rpad().  Update all
655         references.
656         (str_compare_rpad) New function.
657         (st_bare_pad_copy) Rename buf_copy_str_rpad().  Update all
658         references.
659         (buf_copy_str_lpad) New function.
660         (st_bare_pad_len_copy) Rename buf_copy_rpad().  Update all
661         references.
662         (st_pad_copy) Rename str_copy_rpad().  Update all references.
663         (st_trim_copy) Rename str_copy_trunc().  Update all references.
664         (st_uppercase) Renamed str_uppercase().  Update all references.
665         
666 Sat May 14 08:22:26 WST 2005 John Darrington <john@darrington.wattle.id.au>
667
668         * dfm-read.c: Fixed polarity of test in dfm-close-reader.  Closes 
669         Bug #13082
670
671 Tue May 10 20:08:18 2005  Ben Pfaff  <blp@gnu.org>
672
673         * data-in.c: (data_in) Add assertion to check input specifier.
674
675         * data-out.c: (data_out) Add assertion to check output specifier.
676
677 Tue May 10 19:56:35 2005  Ben Pfaff  <blp@gnu.org>
678
679         Start to fix bug 13054.
680
681         * format.c: (check_input_specifier) Improve error message.
682         (check_input_specifier) Check F, COMMA, and DOLLAR formats for
683         valid decimal places.
684         (check_output_specifier) Ditto (but different criteria).
685         (convert_fmt_ItoO) Assert valid input and output specifiers.
686         Also, if input specifier has *any* decimal places, make the output
687         specifier 1 place wider.
688
689 Mon May  9 07:14:29 WST 2005 John Darrington <john@darrington.wattle.id.au>
690
691         * sysfile-info.c: Fixed bug [# 13024 ]
692
693 Sun May  8 13:52:12 2005  Ben Pfaff  <blp@gnu.org>
694
695         "Fix" bug 13021 by disabling FILE TYPE.  Eventually, we should
696         actually implement it.
697
698         * command.c: (FILE_TYPE_okay) Always return 1.
699
700         * command.def: Change FILE TYPE, END FILE TYPE into UNIMPL.
701
702         * file-type.c: Add prototypes to get rid of warnings.
703
704 Sun May  8 08:08:07 WST 2005 John Darrington <john@darrington.wattle.id.au>
705
706         * barchart.c box-whisker.c cartesian.c piechart.c plot-hist.c: Fixed 
707         more ISO/IEC 9899:1990 conformance issues.
708
709 Wed May  4 23:54:02 2005  Ben Pfaff  <blp@gnu.org>
710
711         Fix bug 12948.  See also new test in
712         tests/bugs/match-file-scratch.sh.
713         
714         * get.c: (mtf_merge_dictionary) Don't compact dictionary because
715         that deletes scratch variables that someone else might be using,
716         and because we can't reassign our sources' value indexes.
717         Instead, simply don't copy scratch variables into the master
718         dictionary.
719
720         * dictionary.c: (dict_compact_values) Delete variables from the
721         dictionary passed in, not from default_dict (!).
722
723 Tue May  3 22:25:17 2005  Ben Pfaff  <blp@gnu.org>
724
725         Improve hash.c comments, error-checking.
726         
727         * hash.c: (struct hsh_table) [NDEBUG] Add hash_ordered member.
728         (hsh_create) size == 0 should *not* return NULL!  Set
729         hash_ordered.
730         (hsh_clear) Set hash_ordered.
731         (locate_matching_entry) Check hash_ordered.
732         (hsh_rehash) Rename rehash().  Add assertion.  Set hash_ordered.
733         (hsh_data) Set hash_ordered.  Add const-ness to return value and
734         update all callers.
735         (hsh_sort) Ditto.       
736
737 Wed May  4 08:50:11 WST 2005 John Darrington <john@darrington.wattle.id.au>
738
739         * casefile.c: Removed unnecessary #include <valgrind/valgrind.h>
740
741 Tue May  3 19:14:48 WST 2005 John Darrington <john@darrington.wattle.id.au>
742
743         * copyleft.c: Updated copyright date.
744
745         * Makefile.am: Removed erroneous explicit "-lplot"
746
747         * examine.q oneway.q: Made these files conform to ISO/IEC 9899:1990
748
749 Tue May  3 16:20:31 WST 2005 John Darrington <john@darrington.wattle.id.au>
750
751         * command.c command.def: Added description string for unimplemented commands.
752
753         * oneway.q: Sorted the hash tables before shipping out the results. Closes 
754         bug [#12931].
755
756 Mon May  2 23:45:01 2005  Ben Pfaff  <blp@gnu.org>
757
758         Code improvements.
759         
760         * data-list.c:  (parse_fixed) Use lex_end_of_command().
761         (parse_free) Ditto.
762         (cmd_repeating_data) Set cont_end.num in right situations.
763         (parse_repeating_data) Remove redundant test.
764
765 Mon May  2 23:37:19 2005  Ben Pfaff  <blp@gnu.org>
766
767         Partial fix for bug 12859.
768         
769         * data-list.c: (cmd_data_list) Add transformation properly in
770         vfm_source == NULL case.
771
772 Mon May  2 23:27:28 2005  Ben Pfaff  <blp@gnu.org>
773
774         * lexer.c: (lex_error) Improve error messages.
775
776 Mon May  2 22:28:17 2005  Ben Pfaff  <blp@gnu.org>
777
778         * get.c: (cmd_match_files) Check token type before trying to match
779         tokid.  Fixes bug 12923.
780
781 Mon May  2 22:16:51 2005  Ben Pfaff  <blp@gnu.org>
782
783         * flip.c: [HAVE_SYS_TYPES_H] Include <sys/types.h>.  Fixes bug
784         12789.
785
786 Mon May  2 22:02:52 2005  Ben Pfaff  <blp@gnu.org>
787
788         * expressions/generate.pl: (get_token) Make use of /g
789         backward-compatible with Perl 5.6.1.
790
791 Sun May  1 23:00:19 2005  Ben Pfaff  <blp@gnu.org>
792
793         * var-display.c: (cmd_variable_alignment) Fix memory leak.
794         (cmd_variable_level) Ditto.
795
796 Sun May  1 22:49:04 2005  Ben Pfaff  <blp@gnu.org>
797
798         Hash table had buggy deletion function.  The fix required changing
799         other functions to do probing in the required order.
800
801         * hash.c: (locate_matching_entry) Rewrite and change interface.
802         (hsh_rehash) Rewrite to use locate_matching_entry().
803         (hsh_probe) Ditto.
804         (hsh_find) Ditto.
805         (hsh_delete) Ditto.  Also, fix stupid bugs.
806
807 Sun May  1 22:24:58 2005  Ben Pfaff  <blp@gnu.org>
808
809         * dictionary.c: (dict_clone) Properly copy vectors.
810
811 Sun May  1 22:07:58 2005  Ben Pfaff  <blp@gnu.org>
812
813         New implementation of long variable names.  Each variable has a
814         "normal" name, which may be up to 64 bytes long and which is used
815         for all normal operations.  Variables may have a "short" name,
816         which is limited to 8 bytes and used only for system and portable
817         file input and output.
818         
819         Make tokid case-preserving.  Update most uses of tokid to treat it
820         case-insensitively.
821
822         Update many commands to deal with long variable names.
823
824         * autorecode.c: (cmd_autorecode) Use strcasecmp() instead of strcmp().
825
826         * command.c: (cmd_parse) Ditto.
827         (match_strings) Use toupper() before comparing characters.
828         (conflicting_3char_prefixes) Use mm_case_compare() instead of
829         memcmp().
830         (cmd_match_words) Ditto.
831
832         * compute.c: (lvalue_parse) Use st_trim_copy() instead of
833         strncpy().
834
835         * count.c: (struct cnt_var_info) Change n[] to fit long var name.
836         Use st_trim_copy() instead of strcpy().
837
838         * data-in.c: (parse_enum) Use mm_case_compare() instead of
839         memcmp().
840
841         * data-list.c: (struct dls_var_spec) Change name[] to fit long var
842         name.
843         (parse_free) Use st_trim_copy() instead of strcpy().
844
845         * descript.c: (struct dsc_var) Change z_name[] to fit long var
846         name.
847         (try_name) Use strcasecmp() instead of strcmp().
848         (generate_z_varname) Use st_trim_copy() instead of strcpy().
849         (descriptives_compare_dsc_vars) Use strcasecmp() instead of
850         strcmp().
851
852         * dictionary.c: (struct dictionary) Removed `long_name_tab'
853         member.
854         (compare_long_names) Removed.
855         (hash_long_name) Removed.
856         (dict_create) Don't initialize `long_name_tab' member.
857         (dict_clone) Copy short names into new dictionary. 
858         (dict_clear) Don't clear `long_name_tab' member.
859         (dict_get_varname_block) Removed.
860         (dict_add_longvar_entry) Removed.
861         (free_nte) Removed.
862         (dict_destroy) Don't destroy `long_name_tab' member.
863         (dict_create_var_from_short) Removed.
864         (dict_create_var_x) Removed.
865         (dict_create_var) Get rid of longname handling.
866         Clear short name.
867         (dict_clone_var) Get rid of longname parameter and longname
868         handling.
869         (dict_lookup_var) Get rid of longname handling.
870         (dict_reorder_var) New function.
871         (dict_rename_var) Clear short name.
872         (dict_rename_vars) Get rid of longname handling.  Clear short
873         names.
874         (dict_create_vector) Support long vector names.
875         (dict_lookup_vector) Use strcasecmp() instead of strcmp().
876         (quasi_base27) Removed.
877         (make_short_name) Removed.
878         (compare_strings) New function.
879         (hash_string) New function.
880         (dict_assign_short_names) New function.
881
882         * file-handle.q: (get_handle_with_name) Use strcasecmp() instead
883         of strcmp().
884         (get_handle_for_filename) Support long handle names.
885
886         * file-type.c: (struct col_spec) Make `name' fit long var names.
887         (cmd_file_type) Use strcasecmp() instead of strcmp().
888
889         * flip.c: (make_new_var) Rewrite.
890         (flip_sink_write) Use st_trim_copy() instead of strncpy().
891
892         * format.c: (parse_format_specifier_name) Use mm_case_compare()
893         instead of memcmp().
894
895         * get.c: (cmd_save_internal) Rephrase.
896         (rename_variables) Drop test for identical variable name.
897         (struct mtf_proc) Change `first', `last' to fit long var name.
898
899         * hash.c: (hsh_hash_case_string) New function for case-insensitive
900         string hashing.
901
902         * lexer.c: (restore_token) Use st_trim_copy() instead of
903         strncpy().
904         (lex_get) Don't uppercase string when copying into tokid.
905         (lex_put_back_id) Use st_trim_copy() instead of
906         strncpy().
907
908         * list.q: (determine_layout) Consider length of variable names in
909         choosing vertical layout.
910
911         * matrix-data.c: (cmd_matrix_data) Use strcasecmp() instead of
912         strcmp().
913         (string_to_content_type) Ditto.
914
915         * modify-vars.c: (compare_variables_given_ordering) Ditto.
916         (struct var_renaming) Change `new_name' to fit long var name.
917         (compare_var_renaming_by_new_name) Use strcasecmp() instead of
918         strcmp().
919
920         * pfm-read.c: (read_variables) Disallow system variables in system
921         files.
922         (write_variables) Call dict_assign_short_names() and use
923         short_name[] members.
924
925         * repeat.c: (internal_cmd_do_repeat) Use strcasecmp() instead of
926         strcmp().
927
928         * sfm-read.c: (sfm_open_reader) Rewrite code for long variable
929         map.  Reorder variables into same order as long variable map.
930         (read_variables) Set short name.
931
932         * sfm-write.c: (sfm_open_writer) Call dict_assign_short_names().
933         (write_variable) Use st_bare_pad_copy().
934         (write_longvar_table) Rewrite.
935
936         * str.c: (mm_case_compare) New function.
937
938         * sysfile-info.c: (compare_vectors_by_name) Use strcasecmp()
939         instead of strcmp().
940
941         * t-test.q: (tts_custom_groups) Remove redundant test.
942         (tts_custom_pairs) Ditto.
943
944         * var.h: (struct variable) Change `name' to fit long var names.
945         Remove `longname'.  Add `short_name' member.  Reorder some
946         variables.
947         (struct name_table_entry) Removed.
948         (struct vector) Change `name' to fit long vector names.
949
950         * vars-atr.c: (var_is_valid_name) Allow long var names.
951         (compare_var_names) Use strcasecmp() instead of strcmp().
952         (compare_var_ptr_names) Ditto.
953         (hash_var_name) Use hsh_hash_case_string().
954         (hash_var_ptr_name) Ditto.
955         (var_set_short_name) New function.
956         (var_clear_short_name) New function.
957         (var_set_short_name_suffix) New function.
958
959         * vars-prs.c: (parse_DATA_LIST_vars) Support long names.
960         Use strcasecmp() instead of strcmp().
961         (struct array_var_set) Removed `longname_tab'.
962         (array_var_set_lookup_var_idx) Drop longname_tab support.
963         (array_var_set_destroy) Don't destroy `longname_tab'.
964         (var_set_create_from_array) Don't create `longname_tab'.
965
966         * vector.c: (cmd_vector) Use strcasecmp() instead of strcmp().
967         Support long names.
968
969         * expressions/parse.c: (word_matches) Use mm_case_compare()
970         instead of memcmp().
971         (compare_strings) New function.
972         (lookup_function) Use compare_strings() instead of strcmp().
973         
974 Sun May  1 22:07:43 2005  Ben Pfaff  <blp@gnu.org>
975
976         * algorithm.c: (move_element) New function.
977
978 Sun May  1 22:05:35 2005  Ben Pfaff  <blp@gnu.org>
979
980         * aggregate.c: (parse_aggregate_functions) Always initialize
981         destvar.
982
983 Sun May  1 22:03:47 2005  Ben Pfaff  <blp@gnu.org>
984
985         * aggregate.c: (cmd_aggregate) Use dict_clone_var_assert().
986
987         * dictionary.c: (dict_clone) Ditto.
988         (dict_clone_var_assert) New function.
989
990         * get.c: (mtf_merge_dictionary) Use dict_clone_var_assert().
991
992 Sun May  1 15:05:54 WST 2005 John Darrington <john@darrington.wattle.id.au>
993
994         * error.c: Added a string for the compiler version to the
995         request_bug_report_and_abort function.
996
997         * groff_font.c, font.c: Removed manpage(1) style references from 
998         comments, because RMS frowns upon them.
999
1000 Thu Apr 28 18:52:06 2005  Ben Pfaff  <blp@gnu.org>
1001
1002         * expressions/parse.c: Improve previous fix for bug 12858 (LAG).
1003
1004 Fri Apr 29 09:28:00 WST 2005 John Darrington <john@darrington.wattle.id.au>
1005
1006         * expressions/parse.c: Added handler for OP_LAG_Vn and OP_LAG_Vs.  
1007         Fixed bug [#12858] .
1008
1009 Wed Apr 27 12:42:34 WST 2005 John Darrington <john@darrington.wattle.id.au>
1010
1011         * loop.c recode.c repeat.c: Fixed a couple of instances of SHORT_NAME_LEN 
1012         which should be LONG_NAME_LEN
1013
1014 Wed Apr 27 07:43:50 WST 2005 John Darrington <john@darrington.wattle.id.au>
1015
1016         * command.def echo.c:  Added the ECHO command.
1017
1018 Mon Apr 25 22:55:59 2005  Ben Pfaff  <blp@gnu.org>
1019
1020         Finish fixing MATCH FILES (bug 11677).
1021
1022         * get.c: (trim_dictionary) Rewrite in terms of drop_variables(),
1023         keep_variables(), rename_variables().
1024         (drop_variables) New function.
1025         (keep_variables) New function.
1026         (struct mtf_file) Rename `in' to `in_name'.  Add `in_var'.
1027         (cmd_match_files) Deal with in_var.  Use drop_variables(),
1028         keep_variables().  When IN is specified, require BY.  Set master
1029         variables after master dictionary is complete.  Add IN variables
1030         after master dictionary is complete.
1031         (mtf_free_file) Free `in_name'.
1032         (mtf_delete_file_in_place) Set in_var value to 0.
1033         (mtf_read_nonactive_records)  Rephrase.
1034         (mtf_processing) Support IN.  Rephrase.  Fix bugs.
1035         (mtf_merge_dictionary) Don't set master variables; we do that
1036         later now.
1037         (get_master) Don't insist that there's a master variable.
1038         
1039 Mon Apr 25 22:55:22 2005  Ben Pfaff  <blp@gnu.org>
1040
1041         Kluge to make some variable renaming sort of work.
1042         Needs real fix.
1043
1044         * dictionary.c: (dict_rename_var) Call dict_add_longvar_entry().
1045
1046 Mon Apr 25 22:52:28 2005  Ben Pfaff  <blp@gnu.org>
1047
1048         Add functions for comparing sets of variables between cases.
1049         Use the functions.
1050
1051         * case.c: (case_compare) New function.
1052         (case_compare_2dict) New function.
1053         
1054         * aggregate.c: (struct agr_proc) Remove `prev_break' member.  Add
1055         `break_case'.
1056         (cmd_aggregate) Nullify break_case.  Don't call
1057         initialize_aggregate_info().
1058         (agr_destroy) Destroy break_case.
1059         (aggregate_single_case) Rewrite.  Use case_compare().
1060         (dump_aggregate_info) Copy from break_case into output.
1061         (initialize_aggregate_info) Copy break_case from input.
1062
1063         * get.c: (mtf_compare_BY_values) Use case_compare_2dict().
1064
1065         * vfm.c: (equal_splits) Use case_compare().
1066
1067 Sat Apr 23 17:01:04 WST 2005 John Darrington <john@darrington.wattle.id.au>
1068
1069         * dictionary.c vars-prs.c sfm-write.c: Fixed some memory leaks
1070
1071 Sun Apr 17 23:08:15 2005  Ben Pfaff  <blp@gnu.org>
1072
1073         Start work on fixing MATCH FILES.
1074
1075         * get.c: (enum operation) Remove OP_MATCH.
1076         (trim_dictionary) Change return value to bool.  Don't support
1077         OP_MATCH.
1078         (struct mtf_file) Remove `first', `last' members.
1079         (struct mtf_proc) Add `first', `last' members.  Change mtf_case
1080         from `struct ccase *' to `struct ccase'.  Remove `by' member.
1081         (cmd_match_files) Essentially rewrite.
1082         (mtf_free) Don't free `by' member.  Destroy `mtf_case' member.
1083         (mtf_read_nonactive_records) mtf_ parameter is not unused.
1084         (mtf_processing) Ditto.  Also rephrase some code.
1085         (mtf_merge_dictionary) Rewrite for easy comprehension.  
1086
1087 Sun Apr 17 23:06:00 2005  Ben Pfaff  <blp@gnu.org>
1088
1089         * matrix-data.c: (wr_output_data) [DEBUGGING] Fix compilation
1090         error.
1091
1092         * q2c.c: (dump_token) [DEBUGGING] Fix compilation error.
1093         
1094 Thu Apr 14 2005 John Darrington
1095
1096         * var-display.c: New file.
1097
1098         * format.h var.h sfm-read.c sfm-write.c dictionary.c :  Added 
1099           display_width, measure and alignment parameters to variables.
1100
1101         * aggregate.c command.def compute.c count.c data-list.c descript.c
1102           dictionary.c dictionary.h expr-prs.c file-type.c flip.c get.c 
1103           lexer.c lexer.h loop.c modify-vars.c pfm-read.c recode.c repeat.c 
1104           sfm-read.c sfm-write.c sfm-write.h sfmP.h val-labs.c val.h var.h 
1105           vars-prs.c vector.c :  
1106               - Replaced literal constants representing maximum variable name 
1107                 length with macro definitions. 
1108               - Added support for long variable names.
1109               - Changed lexer such that it no longer makes tokens upper
1110                 case, but relies upon case insensitive behaviour of commands.
1111
1112 Mon Apr  4 22:27:34 2005  Ben Pfaff  <blp@gnu.org>
1113
1114         * aggregate.c: (parse_aggregate_functions) If dict_create_var()
1115         fails, don't dereference the resulting null pointer (bug 12427).
1116         Also, fix double free error.
1117
1118 Sat Mar 19 23:06:02 2005  Ben Pfaff  <blp@gnu.org>
1119
1120         * aggregate.c: (parse_aggregate_functions) Fix N_NO_VARS format.
1121         (accumulate_aggregate_info) Set int1 to 1 for SUM.
1122         (dump_aggregate_info) Only make SUM non-missing if there was at
1123         least one variate.
1124
1125 Sat Mar 19 14:48:19 2005  Ben Pfaff  <blp@gnu.org>
1126
1127         * aggregate.c: (dump_aggregate_info) Properly test whether the
1128         destination variable is numeric, when making the result
1129         system-missing for columnwise missing values.
1130
1131 Mon Mar 14 21:52:34 2005  Ben Pfaff  <blp@gnu.org>
1132
1133         * misc.h: Remove GCC specializations.
1134
1135 Mon Mar 14 21:07:23 2005  Ben Pfaff  <blp@gnu.org>
1136
1137         Make sort stable (bug 12313).
1138         
1139         * sort.c: Don't need to include some headers anymore.
1140         (static var min_buffers) New variable.
1141         (static var max_buffers) New variable.
1142         (static var allow_internal_sort) New variable.
1143         (cmd_sort_cases) Add test mode.
1144         (sort_execute) Rephrase.
1145         (do_internal_sort) Don't try internal sorting if
1146         allow_internal_sort is set.
1147         (struct external_sort) Renamed `initial_runs' to `runs' and
1148         updated all references.
1149         (macro MIN_BUFFER_TOTAL_SIZE_RECS) Removed.
1150         (macro MIN_BUFFER_SIZE_BYTES) Removed.
1151         (macro MIN_BUFFER_SIZE_RECS) Removed.
1152         (compare_initial_runs) Removed.
1153         (struct record_run) Add member `idx'.
1154         (write_initial_runs) Pass increasing values to process_case() as
1155         index.
1156         (process_case) Add `idx' parameter and use it to initialize new
1157         `idx' member.
1158         (allocate_cases) Limit allocated buffers to max_buffers.
1159         (compare_record_run) Use new `idx' member for last resort
1160         comparison, for stability.
1161         (end_run) Call casefile_sleep() on irs->casefile, to prevent
1162         running out of file descriptors.
1163         (struct merge_state) Removed.
1164         (merge) Don't need to allocate cases.  Always use MAX_MERGE_ORDER
1165         unless we have fewer runs left.  Always merge consecutive runs,
1166         for stability.  Return the final run.
1167         (mod) Removed.
1168         (choose_merge) New function.
1169         (merge_once) Rewritten.
1170
1171 Mon Mar 14 21:05:42 2005  Ben Pfaff  <blp@gnu.org>
1172
1173         * cmdline.c: (static var testing_mode) Move into
1174         parse_command_line().
1175         
1176 Mon Mar 14 21:05:13 2005  Ben Pfaff  <blp@gnu.org>
1177
1178         * algorithm.c: (remove_range) New function.
1179         (remove_element) New function.
1180
1181         * dictionary.c: (dict_delete_var) Use remove_element().
1182
1183         * flip.c: (cmd_flip) Ditto.
1184
1185 Sun Mar 13 22:52:05 2005  Ben Pfaff  <blp@gnu.org>
1186
1187         * file-handle.q: (struct file_handle) `open_mode' should not be
1188         const.
1189         
1190 Sun Mar 13 22:40:54 2005  Ben Pfaff  <blp@gnu.org>
1191
1192         First phase of making SORT CASES stable (bug 12313).
1193
1194         * sort.c: (struct indexed_case) New structure.
1195         (do_internal_sort) Rewrite to make internal sorting stable.
1196         (compare_case_dblptrs) Removed.
1197         (compare_indexed_cases) New function.
1198
1199 Sun Mar 13 22:38:40 2005  Ben Pfaff  <blp@gnu.org>
1200
1201         Clean-ups.
1202
1203         * casefile.c: (casereader_read_xfer_assert) New function.
1204
1205         * dictionary.c: (dict_compact_case) New function.
1206
1207         * flip.c: (struct flip_pgm) New member idx_to_fv.
1208         (cmd_flip) Initialize idx_to_fv member.
1209         (destroy_flip_pgm) Free idx_to_fv member.
1210         (flip_sink_write) Use struct flip_pgm member instead of case_sink
1211         member.
1212         (flip_sink_write) Ditto.
1213
1214         * vfm.c: (write_case) Use dict_compact_case() instead of
1215         compact_case().
1216         (compact_case) Removed.
1217         (storage_source_create) Removed `dict' parameter.  All references
1218         updated.
1219
1220         * vfm.h: (struct case_source) Removed `value_cnt' member.  All
1221         references removed.
1222         (struct case_sink) Removed `dict', `idx_to_fv' members.  All
1223         references removed.
1224
1225 Sun Mar 13 22:35:55 2005  Ben Pfaff  <blp@gnu.org>
1226
1227         More AGGREGATE fixes.
1228
1229         * aggregate.c: (accumulate_aggregate_info) Implement NMISS and
1230         NUMISS for strings.  Fix FOUT, POUT, FGT, FLT, FIN, FOUT for
1231         strings.
1232         (initialize_aggregate_info) Fix initialization for MIN, MAX for
1233         strings.
1234
1235 Sat Mar 12 23:26:21 2005  Ben Pfaff  <blp@gnu.org>
1236
1237         Start work on testing and debugging AGGREGATE.
1238
1239         * aggregate.c: (cmd_aggregate) Use discrete bool variables instead
1240         of a bit-map.  Require proper subcommand ordering.  Make OUTFILE
1241         subcommand mandatory.
1242         (parse_aggregate_functions) Check that PIN, POUT, FIN, FOUT
1243         functions' arguments are in the correct order and swap them if
1244         not.
1245         (accumulate_aggregate_info) Make SUM include weights.  Add various
1246         string functions.
1247         (dump_aggregate_info) Add various string functions.
1248         (initialize_aggregate_info) Initialize int1 for MIN, MAX.
1249
1250         * sort.c: (sort_parse_criteria) Add parameter for returning
1251         whether any directions were specified.  All callers updated.
1252
1253 Sun Mar 13 14:54:27 WST 2005 John Darrington <john@darrington.wattle.id.au>
1254
1255         * t-test.q: Fixed erroneous logic in compare_group_binary.
1256
1257 Sat Mar 12 13:29:21 2005  Ben Pfaff  <blp@gnu.org>
1258
1259         * split-file.c: (cmd_split_file) Ignore LAYERED and SEPARATE
1260         keywords (bug 11628).
1261
1262 Sat Mar 12 13:17:12 2005  Ben Pfaff  <blp@gnu.org>
1263
1264         * vfm.c: (procedure_with_splits) Fix bug 11492: end_func() must be
1265         called *before* close_active_file().
1266
1267 Sat Mar 12 12:20:57 2005  Ben Pfaff  <blp@gnu.org>
1268
1269         * file-handle.q: (struct file_handle) Change open_mode from
1270         character pointer to 3-char array, for safety.  Updated all
1271         references.
1272
1273 Sat Mar 12 12:15:49 2005  Ben Pfaff  <blp@gnu.org>
1274
1275         Thanks to Ben Kujala <bkujala@oregonchildcare.org> for reporting
1276         these bugs.
1277         
1278         * pfm-read.c: (read_header) Improve error message for many cases
1279         in which the input is not actually a portable file.
1280
1281         * file-handle.q: (fh_open) When we give an error message, actually
1282         return NULL.
1283
1284 Fri Mar 11 11:50:30 2005  Ben Pfaff  <blp@gnu.org>
1285
1286         * format.c: (check_common_specifier) New function for checks
1287         common to check_input_specifier() and check_output_specifier().
1288         (check_input_specifier) Use check_common_specifier().
1289         (check_output_specifier) Use check_common_specifier().
1290         (check_string_specifier) Removed.
1291         (check_specifier_type) New function.
1292         (check_specifier_width) New function.
1293         (get_format_var_width) Fix bug.
1294
1295         * formats.c: (internal_cmd_formats) Only accept numeric variables.
1296
1297         * lexer.c: (check_id) Rename lex_id_to_token(), make public,
1298         update all references.  Make case-insensitive.
1299
1300         * pfm-read.c: Essentially rewrite the whole file.  Now much
1301         cleaner.
1302
1303         * print.c: (check_string_width) New function.
1304         (fixed_parse_compatible) Use check_string_width(),
1305         check_specifier_type().
1306         (dump_fmt_list) Ditto.
1307
1308         * str.c: (st_trim_copy) New function.
1309         (st_uppercase) New function.
1310
1311         * vars-atr.c: (var_is_valid_name) New function.
1312         
1313         * expressions/parse.c: (type_coercion_core) Use
1314         check_specifier_type().
1315         
1316 Fri Mar 11 11:31:24 2005  Ben Pfaff  <blp@gnu.org>
1317
1318         * expressions/evaluate.c: (cmd_debug_evaluate) Fix memory leaks.
1319
1320         * expressions/parse.c: (no_match) Ditto.
1321
1322 Wed Mar  9 09:54:27 2005  Ben Pfaff  <blp@gnu.org>
1323
1324         * Makefile.am: (pspp_LDADD) Add libgsl-extras.a.
1325
1326         * expressions/helpers.c: (struct func_params) Removed.
1327         (generalized_idf) Removed.
1328         (cdf_beta) Removed.
1329         (idf_beta) Removed.
1330         (idf_fdist) Use gslextras_cdf_beta_Pinv() instead of idf_beta().
1331
1332         * expressions/operations.def: Implement IDF.BETA, CDF.BINOM,
1333         CDF.GEOM, CDF.HYPER, CDF.NEGBIN, CDF.POISSON using gsl-extras.
1334         Implement SIG.F, which I had overlooked previously.
1335
1336 Tue Mar  8 12:47:53 WST 2005 John Darrington <john@darrington.wattle.id.au>
1337
1338         * command.c command.def glob.[ch] cmdline.c: Made DEBUG cmds
1339         available only in testing mode.
1340
1341 Sun Mar  6 23:25:40 2005  Ben Pfaff  <blp@gnu.org>
1342
1343         * data-in.c: Use `bool' throughout, where relevant.
1344
1345 Sun Mar  6 19:52:22 2005  Ben Pfaff  <blp@gnu.org>
1346
1347         DATA LIST with free-field formats should not have implied decimal
1348         places (bug 12035).  Also clean up data-in.c a bit.
1349
1350         * data-in.h: (enum) Add DI_IMPLIED_DECIMALS.
1351
1352         * data-in.c: (apply_implied_decimals) New function.
1353         (parse_numeric) Don't adjust exponent if DI_IMPLIED_DECIMALS not
1354         set.  Also, get rid of gotos.
1355         (parse_Z) Use apply_implied_decimals() if the field doesn't
1356         contain a decimal point.
1357         (parse_N) Use apply_implied_decimals().
1358         (parse_IB) Ditto.
1359         (parse_PIB) Ditto.
1360         (parse_P) Ditto.
1361         (parse_PK) Ditto.
1362         (to_roman) Removed.
1363         (parse_enum) New function.
1364         (macro CHAR_IS_ROMAN) Removed.
1365         (macro ROMAN_VALUE) Removed.
1366         (parse_month) Use parse_enum().
1367         (parse_weekday) Use parse_enum().
1368         (parse_DATETIME) Use long for weekday.
1369
1370         * data-list.c: (read_from_data_list_fixed) Use
1371         DI_IMPLIED_DECIMALS.
1372
1373 Sun Mar  6 17:07:20 2005  Ben Pfaff  <blp@gnu.org>
1374
1375         When the lexer sees something like `-5' in the input, it has to
1376         decide whether it's a negative numeric constant token or a '-'
1377         token followed by a positive numeric constant token.  It always
1378         decides on the former, and then the parser can call
1379         lex_negative_to_dash() if it wants the latter.  However, this
1380         doesn't work for the case of `-0', because negative zero is
1381         (portably) indistinguishable from positive zero.  So now we divide
1382         T_NUM into two tokens, T_POS_NUM and T_NEG_NUM, to make the
1383         distinction clear.  This requires a little bit of extra effort,
1384         because there were several references to T_NUM in the code base.
1385         
1386         * lexer.c: (lex_get) Use T_NEG_NUM and T_POS_NUM to distinguish
1387         positive and negative numeric constants.
1388         (lex_double_p) Renamed lex_is_number().  Changed return type to
1389         bool.  Updated all relevant references to T_NUM to instead use
1390         this function.
1391         (lex_double) Renamed lex_number().  All references updated.
1392         (lex_integer_p) Renamed lex_is_integer().  Changed return type to
1393         bool.  All references updated.
1394         (lex_token_representation) Understand T_NEG_NUM and T_POS_NUM.
1395         (lex_negative_to_dash) Ditto.
1396         (dump_token) Ditto.
1397         
1398         * lexer.h: (enum) Add T_POS_NUM, T_NEG_NUM.  Remove T_NUM.
1399
1400 Sun Mar  6 22:09:20 2005  Ben Pfaff  <blp@gnu.org>
1401
1402         * expressions/operations.def: (NUMBER) Use DI_IMPLIED_DECIMALS.
1403
1404 Sun Mar  6 19:33:24 2005  Ben Pfaff  <blp@gnu.org>
1405
1406         * expressions/operations.def: (VEC_ELEM_NUM) Treat user-missing
1407         values as system-missing.
1408
1409         * expressions/parse.c: (parse_vector_element) Fix order of
1410         arguments in call to expr_allocate_binary().
1411
1412 Sun Mar  6 17:51:05 2005  Ben Pfaff  <blp@gnu.org>
1413
1414         * expressions/optimize.c: (optimize_tree) Fix optimization bug for
1415         x**2.
1416
1417         * expressions/parse.c: (type_coercion_core) Set *node to NULL on
1418         failure, as indicated by function comment.
1419         (parse_binary_operators) Always return NULL on type_coercion()
1420         failure.  Should have been doing this anyway, but bug in
1421         type_coercion_core() filtered through.
1422         (parse_add) Fix typo in user message.
1423         (parse_primary) Understand T_NEG_NUM and T_POS_NUM.
1424
1425 Sun Mar  6 10:47:13 2005  Ben Pfaff  <blp@gnu.org>
1426
1427         * expressions/operations.def: Add VALUE function.
1428
1429         * expressions/parse.c: (parse_function) Need an unary composite
1430         node for variables in A TO B, not a variable node.  Use
1431         allocate_unary_variable().
1432         (parse_primary) Use allocate_unary_variable().
1433         (allocate_unary_variable) New function.
1434
1435 Thu Mar  3 23:53:32 2005  Ben Pfaff  <blp@gnu.org>
1436
1437         * expressions/PSPP_expressions.pm: Renamed it back to generate.pl
1438         but fixed the real problem that was preventing the build from a
1439         separate directory.  I liked it my way better ;-)
1440         
1441 Thu Mar  3 23:17:51 2005  Ben Pfaff  <blp@gnu.org>
1442
1443         * expressions/parse.c: (expr_parse) Fix parameter type.  Thanks to
1444         John Darrington <john@darrington.wattle.id.au> for reporting this
1445         bug.
1446
1447 Thu Mar  3 22:10:25 WST 2005 John Darrington <john@darrington.wattle.id.au>
1448
1449         * expressions/Makefile.am expressions/evaluate.h.pl
1450           expressions/evaluate.inc.pl expressions/operations.h.pl
1451           expressions/optimize.inc.pl expressions/parse.inc.p:
1452
1453           Renamed generate.pl to PSPP_expressions.pm and adjusted *.pl
1454           to suit. 
1455
1456           Fixed everything so that it can be built from an arbitrary
1457           directory.
1458         
1459 Thu Mar  3 22:08:35 WST 2005 John Darrington <john@darrington.wattle.id.au>
1460
1461         * Makefile.am : Fixed up CLEANFILES target.
1462
1463 Mon Feb 28 23:49:56 2005  Ben Pfaff  <blp@gnu.org>
1464
1465         * str.h: Changed `struct len_string' to `struct fixed_string', a
1466         more accurate name.  Updated all references.
1467
1468 Mon Feb 28 23:35:30 2005  Ben Pfaff  <blp@gnu.org>
1469
1470         Redo calendar support.  Should now be bug-for-bug compatible.
1471         
1472         * calendar.c: New file.
1473
1474         * calendar.h: New file.
1475
1476         * data-in.c: Use new calendar functions.
1477         (parse_sign) Change sense of return value.
1478         (calendar_error) New function.
1479         (ymd_to_ofs) New function.
1480         (ymd_to_date) New function.
1481         (parse_DATE) Use new function.
1482         (parse_ADATE) Ditto.
1483         (parse_EDATE) Ditto.
1484         (parse_SDATE) Ditto.
1485         (parse_JDATE) Ditto.
1486         (parse_QYR) Ditto.
1487         (parse_MOYR) Ditto.
1488         (parse_WKYR) Ditto.
1489         (parse_TIME) Ditto.
1490         (parse_DTIME) Ditto.
1491         (parse_DATETIME) Ditto.
1492
1493         * data-out.c: (convert_date) Use new calendar functions.
1494
1495         * error.c: (err_vmsg) Changed interface to be more sensible.
1496         Updated all callers.
1497         (dump_message) Don't double new-lines (why did we do this
1498         anyway?).
1499
1500 Mon Feb 28 23:30:25 2005  Ben Pfaff  <blp@gnu.org>
1501
1502         * sfmP.h: (macro flt64) Moved here from pref.h.orig.
1503         (macro FLT64_MAX) Moved here from pref.h.orig.
1504
1505 Mon Feb 28 23:28:01 2005  Ben Pfaff  <blp@gnu.org>
1506
1507         * set.q: Support SET EPOCH.
1508         (static var set_epoch) New var.
1509         (aux_stc_custom_epoch) New function.
1510         (stc_custom_epoch) New function.
1511         (get_epoch) New function.
1512         (stc_custom_pager) [USE_INTERNAL_PAGER] Fix bug.
1513
1514         * format.c: Make it possible just to check whether a specifier is
1515         valid without emitting an error message.
1516         (parse_format_specifier_name) Change interface, update all
1517         callers.
1518         (check_input_specifier) Ditto.
1519         (check_output_specifier) Ditto.
1520         (parse_format_specifier) Ditto.
1521
1522 Mon Feb 28 23:24:08 2005  Ben Pfaff  <blp@gnu.org>
1523
1524         * command.def: Add DEBUG POOL.
1525
1526         * pool.c: (pool_destroy) Fix bug in deleting this pool from its
1527         parent.
1528         (pool_clear) Properly account for size of pool gizmo.
1529         (pool_realloc) Ditto.
1530         (pool_clone) New function.
1531
1532         * pool.h: Mark our allocation functions MALLOC_LIKE.
1533
1534 Mon Feb 28 23:21:26 2005  Ben Pfaff  <blp@gnu.org>
1535
1536         * Makefile.am: Move many definitions into new top-level
1537         Make.build.  Add expressions to SUBDIRS.  Add calendar.c,
1538         calendar.h.  Remove expr-evl.c, expr-opt.c expr-prs.c, expr.h,
1539         exprP.h, expr.def.
1540
1541         * case.c: (case_resize) New function.
1542         (case_swap) New function.
1543
1544         * casefile.c: Include mkfile.h.
1545
1546 Fri Feb 25 21:11:35 WST 2005 John Darrington <john@darrington.wattle.id.au>
1547
1548         * sfm-read.c: Fixed a buglet which caused a crash when trying
1549         to read a non-existent file.
1550
1551 Sun Feb 13 16:11:13 2005  Ben Pfaff  <blp@gnu.org>
1552
1553         Fix bug 11955.
1554
1555         * aggregate.c: (parse_aggregate_functions) Code cleanup.
1556         Important part: get rid of spurious copying of function->format to
1557         destvar->print and destvar->write.
1558
1559 Fri Feb 11 00:08:36 2005  Ben Pfaff  <blp@gnu.org>
1560
1561         Fix bug 11916, which was confusing a variable's `index' member
1562         with the variable's position in a var_set.  Although these are
1563         usually the same, they are not for array `var_set's.
1564         
1565         Took advantage of this bug as an opportunity to clean up and
1566         rewrite parse_var_set_vars().
1567
1568         * vars-prs.c: (parse_vs_variable_idx) New function.
1569         (parse_vs_variable) Reimplement in terms of
1570         parse_vs_variable_idx().
1571         (parse_var_idx_class) New function.
1572         (add_variable) New function.
1573         (add_variables) New function.
1574         (parse_var_set_vars) Rewritten.
1575         (struct var_set) Change `lookup_var' member that returns a
1576         variable into `lookup_var_idx' member that returns an int.
1577         Updated the var set implementations in obvious corresponding ways.
1578         Used compare_var_ptr_names(), hash_var_ptr_name() just added.
1579         
1580 Fri Feb 11 00:06:03 2005  Ben Pfaff  <blp@gnu.org>
1581
1582         Use our global variable compare & hash functions and give them
1583         better names.  Add similar functions for dealing with double
1584         pointers to variables.
1585         
1586         * vars-atr.c: (compare_variables) Renamed compare_var_names().
1587         (hash_variable) Renamed hash_var_name().
1588         (compare_var_ptr_names) New function.
1589         (hash_var_ptr_name) New function.
1590         
1591         * t-test.q: (cmd_t_test) Use global compare_var_names(),
1592         hash_var_name().
1593         (compare_var_name) Removed.
1594         (hash_var_name) Removed.
1595
1596 Fri Feb 11 00:04:39 2005  Ben Pfaff  <blp@gnu.org>
1597
1598         Fix dictionary bug.
1599         
1600         * dictionary.c: (compare_variable_dblptrs) Rename
1601         compare_var_ptrs() and fix it to properly dereference the double
1602         pointers.
1603
1604 Mon Feb  7 09:58:15 WST 2005 John Darrington <john@darrington.wattle.id.au>
1605
1606         crosstabs.q examine.q oneway.q q2c.c:  Added a q2c feature to 
1607         declare subcommands as mandatory.  Closed bug #11843
1608
1609 Sat Feb  5 20:35:10 WST 2005 John Darrington <john@darrington.wattle.id.au>
1610         
1611         * getline.c command.[ch] command.def:  Added (very rudimentary)
1612         support for line  completion when in interactive mode.  Partially 
1613         addresses bug #11693
1614         
1615 Mon Jan 31 09:52:51 WST 2005 John Darrington <john@darrington.wattle.id.au>
1616
1617         * examine.q factor_stats.c oneway.q output.c pfm-read.c: Fixed some
1618         problems revealed by valgrind.
1619
1620
1621 Wed Jan 26 11:44:11 WST 2005 John Darrington <john@darrington.wattle.id.au>
1622
1623         * set.q: Affixed a fix to the previous fix such that we'll be OK now
1624         whether or not PAGER is set.
1625
1626 Wed Jan 26 09:25:54 WST 2005 John Darrington <john@darrington.wattle.id.au>
1627
1628         * set.q: Copied the string produced by getenv("PAGER") thus avoiding
1629         "invalid free" errors.  Hopefully fixes bug #11722
1630
1631         * compute.c expr-prs.c: Check that lvalues are populated before 
1632         attempting to destroy them.  Closes bug #11676
1633
1634 Tue Jan 25 21:01:43 WST 2005 John Darrington <john@darrington.wattle.id.au>
1635
1636         * aggregate.c: Initialised the complete agr_proc structure.
1637         Closes bug #11675
1638
1639
1640 Sun Jan 23 23:02:21 2005  Ben Pfaff  <blp@gnu.org>
1641
1642         * print.c: (print_trns_free) Close the dfm writer if there is one,
1643         fixing a memory leak.
1644
1645 Mon Jan 24 12:24:36 WST 2005 John Darrington <john@darrington.wattle.id.au>
1646
1647         * glob.c oneway.q q2c.c t-test.q vfm.c: Still *more* memory leaks 
1648         fixed.
1649
1650
1651 Fri Jan 21 19:54:14 WST 2005 John Darrington <john@darrington.wattle.id.au>
1652
1653         * linked-list.[ch] Added
1654
1655         * examine.q file-handle.[hq] font.h glob.c groff-font.c postscript.c 
1656           set.q:    Yet more memory leaks
1657
1658 Tue Jan 18 23:12:40 WST 2005 John Darrington <john@darrington.wattle.id.au>
1659
1660         * t-test.q examine.q : More memory leaks fixed.
1661
1662 Tue Jan 18 19:26:59 WST 2005 John Darrington <john@darrington.wattle.id.au>
1663
1664         * examine.q  factor_stats.[ch] get.c pfm-read.c: Plugged numerous
1665         memory leaks.
1666
1667 Mon Jan 10 14:43:45 WST 2005 John Darrington <john@darrington.wattle.id.au>
1668
1669         * ascii.c cartesian.c casefile.c chart.h devind.c 
1670           examine.q frequencies.q
1671           html.c output.h piechart.c plot-chart.c plot-hist.c
1672
1673           Integrated the chart rendering into the output stream
1674           (currently only works for html).
1675           
1676           Removed gratuitous use of ifndef NO_CHARTS, and replaced with
1677           dummy-chart.c for compiling without charts.
1678
1679         * mkfile.[ch] Created.  
1680
1681         * som.[ch] tab.[ch]: Changed name of som_table to som_entity
1682         Added type element so we can tell if it's a chart or a table.
1683
1684         * chart.h examine.q piechart.c plot-chart.c plot-hist.c: changed the 
1685         API of charts to be more like that of tables.
1686
1687 Thu Jan 13 21:00:02 WST 2005 John Darrington <john@darrington.wattle.id.au>
1688
1689         * casefile.c main.c: Moved the SIGINT handler from casefile.c to
1690         main.c. Removed the handler for SIGQUIT.
1691
1692 Mon Jan 10 14:43:45 WST 2005 John Darrington <john@darrington.wattle.id.au>
1693
1694         * casefile.c: Added a signal handler to delete temp files on 
1695         SIGINT and SIGQUIT
1696
1697         * permissions.c Inhibited the PERMISSIONS command when SAFER is on.
1698
1699         * command.def Added a lot more unimplemented commands.
1700
1701         * copyleft.[ch] cmdline.c Moved legal information to copyleft.c
1702
1703 Sat Jan  8 23:58:34 2005  Ben Pfaff  <blp@gnu.org>
1704
1705         * sort.c: (compare_initial_runs) Needed additional level of
1706         dereferencing.
1707         (merge_once) Fix plenty of stupid mistakes.
1708
1709 Sat Jan  8 23:55:27 2005  Ben Pfaff  <blp@gnu.org>
1710
1711         * casefile.c: (casefile_sleep) Need to flush_buffer() after
1712         calling casefile_to_disk() or we will lose the last block in the
1713         file if the casefile started out as disk-based.
1714         (casefile_get_reader) Initialize reader->destructive to 0.
1715         (cmd_debug_casefile) Add new test pattern.
1716         (test_casefile) Define new test pattern to make sure
1717         casefile_sleep() works properly.
1718
1719 Fri Jan  7 08:00:05 WST 2005 John Darrington <john@darrington.wattle.id.au>
1720
1721         * Makefile.am chart.[ch]  histogram.[ch] piechart.c (Modified);
1722           plot-hist.c plot-chart.c (Added) Reorganised these files in an
1723           attempt to seperate the creation and processing of charts from their
1724           actuall renedering.
1725
1726         * examine.q frequencies.q generated charts conditional upon the NO_CHARTS
1727           macro.
1728
1729 Thu Jan  6 18:48:58 WST 2005 John Darrington <john@darrington.wattle.id.au>
1730
1731         * main.c Added a signal handler for SIGFPE
1732
1733         * sort.c Somewhat more robust fix to the previous entry.
1734
1735 Wed Jan  5 21:23:31 2005  Ben Pfaff  <blp@gnu.org>
1736
1737         * sort.c: (merge) Fix assertion for proper Huffman merge pattern:
1738         0 == 1 modulo 1.  See Knuth 5.4.9 (vol. 3, 2nd ed.,
1739         pp. 361).  Thanks to John Darrington <john@cellform.com.au> for
1740         reporting the bug.
1741
1742 Wed Jan  5 22:42:26 WST 2005 John Darrington <john@darrington.wattle.id.au>
1743
1744         * case.h Fixed bug # 11307
1745         
1746 Wed Jan  5 08:30:48 WST 2005 John Darrington <john@darrington.wattle.id.au>
1747
1748         * val-labs.c Fixed bug which caused a crash if VALUE LABELS had
1749         a trailing slash.
1750
1751 Mon Jan  3 17:44:37 2005  Ben Pfaff  <blp@gnu.org>
1752
1753         * pfm-read.c: (read_variables) Remove direct manipulation of
1754         v->aux, which is no longer needed.  Fixes bug 11483.
1755
1756 Sat Jan  1 19:01:16 WST 2005 John Darrington <john@darrington.wattle.id.au>
1757
1758         * data-list.c Fixed a bug in parsing delimiters.
1759
1760         * group.c vars-atr.c Fixed buglet in hash/compare functions for alpha
1761         values.
1762
1763         * percentiles.c Properly handled calculation of Tukey hinges where
1764         the number of data is small.
1765
1766         * oneway.q Used the generic value_to_string function for independent
1767         variable instead of trying to do it ourselves.
1768
1769         * box-whisker.c Fixed a buglet which caused a crash if the number of
1770         data was zero
1771
1772
1773 Fri Dec 31 16:47:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
1774
1775         * examine.q box-whisker.c chart.h Implemented boxplots in EXAMINE
1776
1777         * percentiles.c Fixed some bugs when calculating percentiles when
1778         there's a small number of cases.
1779
1780 Wed Dec 29 08:18:08 WST 2004 John Darrington <john@darrington.wattle.id.au>
1781
1782         * percentiles.[ch] Added. Calculates percentiles and Tukey hinges
1783
1784         * examine.q factor_stats.[ch]  Added calculation of percentiles
1785
1786 Fri Dec 24 15:09:11 WST 2004 John Darrington <john@darrington.wattle.id.au>
1787
1788         * t-test.q Fixed bug #11227 Made t-test work when the independent
1789         variable is alpha
1790
1791 Sat Dec 11 11:43:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
1792
1793         * factor_stats.c Fixed calculation of trimmed mean under various
1794         special conditions.
1795
1796 Sat Dec  4 17:14:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
1797
1798         * histogram.c chart.[ch] factor_stats.c frequencies.q
1799
1800         Added code to calculate sensible histogram ranges and limits.
1801
1802 Thu Dec  2 13:37:43 WST 2004 John Darrington <john@darrington.wattle.id.au>
1803
1804         * chart.h Updated to reflect many API changes.
1805
1806         * cartesian.c chart.c Moved the definitions of chart_write_{xy}scale from 
1807         cartesian.c and into chart.c
1808
1809         * factorstats.[ch] Added the histogram calculations
1810
1811         * casefile.c Removed an unused variable.
1812
1813         * frequencies.q examine.q histogram.c  Reworked the API for 
1814         histograms.
1815
1816         * piechart.c  Revised the API for piecharts.
1817
1818         * var.h  Moved the definitions of freq_tab and freq out of var.h
1819         and into frequencies.q where they belong.
1820         
1821 Tue Nov 30 21:10:20 2004  Ben Pfaff  <blp@gnu.org>
1822
1823         * flip.c: (flip_file) Check for off_t separately from fseeko(),
1824         using AC_TYPE_OFF_T.
1825
1826 Tue Nov 30 08:47:41 2004  Ben Pfaff  <blp@gnu.org>
1827
1828         * flip.c: (flip_file) If fseeko() is not available, use long int
1829         for off_t.  Thanks to "Marshall DeBerry" <mdb@radix.net> for
1830         reporting the problem.
1831
1832 Mon Nov 29 12:20:59 WST 2004 John Darrington <john@darrington.wattle.id.au>
1833
1834         * examine.q factor_stats.[ch] Changed stderr to se_mean to avoid
1835         conflict with stdio.
1836
1837 Sun Nov 21 10:32:41 WST 2004 John Darrington <john@darrington.wattle.id.au>
1838
1839         * var-labs.c (var_to_string) Now returns null if the variable is null
1840
1841         * value-labels.c (value_to_string) Made it return null if either the 
1842         value or the variable is null.
1843
1844         * hash.c (hsh_clear) Fixed a buglet.
1845
1846         * examine.q  factor_stats.[ch] Largely  rewrote, because I'd started 
1847         with  the wrong model.
1848
1849         * casefile.[ch] Added a function to return the casereader.case_idx 
1850         member
1851
1852         * examine.q  Implemented the extreme values results.
1853
1854 John Darrington <john@darrington.wattle.id.au>
1855
1856         * settings.h set.c glob.[ch] frequencies.q q2c.c error.c lexer.[ch] 
1857           output.[ch] getline.c 
1858
1859           Plugged some memory leaks
1860
1861 Mon Nov 15 23:47:40 2004  Ben Pfaff  <blp@gnu.org>
1862
1863         Adopt GSL random number generators, paving the way for providing
1864         the complete suite of random number generators on expressions.
1865         
1866         * Makefile.am: Remove random.c, random.h.
1867
1868         * random.c: Removed.
1869
1870         * random.h: Removed.
1871
1872         * algorithm.c: (algo_default_random) Use GSL functions.
1873
1874         * casefile.c: (test_casefile) Use GSL RNG functions.
1875
1876         * expr-evl.c: (expr_evaluate) Use GSL RNG functions for OP_NORMAL,
1877         OP_UNIFORM.
1878
1879         * sample.c: (cmd_sample) Use GSL RNG functions.
1880         (sample_trns_proc) Ditto.
1881
1882         * set.q: (static var set_seed) Removed.
1883         (static var seed_flag) Removed.
1884         (static var rng) New variable.
1885         (aux_stc_custom_seed) No seed value anymore, don't print anything.
1886         (stc_custom_seed) Use new seed functions.
1887         (seed_is_set) Removed.
1888         (get_rng) New function that composes the entire external
1889         interface.
1890         (set_rng) New function.
1891         (random_seed) New function.
1892
1893 Mon Nov 15 22:08:25 2004  Ben Pfaff  <blp@gnu.org>
1894
1895         * expr-evl.c: (expr_evaluate) Fix XDATE.JDAY formula.  Thanks to
1896         John Darrington <john@darrington.wattle.id.au> for reporting this
1897         bug.
1898
1899 Tue Nov 16 13:19:18 WST 2004 John Darrington <john@darrington.wattle.id.au>
1900
1901         * permissions.c command.def Added the PERMISSIONS command
1902
1903 Mon Nov 15 01:33:32 2004  Ben Pfaff  <blp@gnu.org>
1904
1905         * q2c.c: (dump_header) Don't try to emit #includes at very top of
1906         output file because that will precede #include <config.h>, which
1907         is bad.
1908         (main) Add needed headers to /* (header) */ code.
1909
1910 Mon Nov 15 01:21:36 2004  Ben Pfaff  <blp@gnu.org>
1911
1912         Instead of making system or portable file readers responsible for
1913         dropping and reordering variables, make them read full cases and
1914         let the caller take care of any changes.
1915
1916         * get.c: New "case map" structure to handle this.  Use for GET,
1917         IMPORT, MATCH FILES.  Essentially rewrite the whole file.
1918
1919         * pfm-read.c: (pfm_read_case) Read into provided case.  Signature
1920         changed appropriately.
1921
1922         * sfm-read.c: (sfm_read_case) Ditto.
1923
1924 Mon Nov 15 00:47:45 2004  Ben Pfaff  <blp@gnu.org>
1925
1926         Decided that case_serialize() and case_unserialize() were too
1927         abstract.  Also we need a couple more functions to avoid excessive
1928         copying for data in/out fast paths.
1929
1930         * case.c: (case_serial_size) Removed.
1931         (case_serialize) Rename case_to_values() and make its argument
1932         explicitly an array of union values.
1933         (case_unserialize) Rename case_from_values() and make its argument
1934         explicitly an array of union values.
1935         (case_data_all) New function.
1936         (case_data_all_rw) New function.
1937
1938         * casefile.c: (struct casefile) Change buffer from array of
1939         unsigned char to array of union value for better accuracy.
1940         Redefine buffer_used and buffer_size in terms of values, not
1941         bytes.  Remove case_size because it is now redundant with
1942         value_cnt.  Fix up all references to these members.
1943
1944 Mon Nov 15 00:45:46 2004  Ben Pfaff  <blp@gnu.org>
1945
1946         * barchart.c: (struct subcat) Make `label' member const to silence
1947         GCC warning with -Wwrite-strings.
1948
1949         * cartesian.c: (struct dataset) Ditto.
1950
1951         * case.c: Don't re-define NDEBUG if already defined.
1952         Add lots of comments.
1953
1954         * str.c: Fix includes.
1955
1956         * crosstabs.q: Fix includes.
1957
1958         * examine.q: Fix includes.  Fix GCC warning about unused
1959         variables.
1960         
1961         * frequencies.q: (stat macro) Removed and replaced where used by
1962         its expansion.
1963
1964         * list.q: Fix includes.
1965
1966         * oneway.q: Fix includes.
1967
1968         * piechart.c: Fix includes.  Only define M_PI if not already
1969         defined.
1970
1971         * sfm-read.c: (bswap) New function.
1972         (bswap_int32) Write in terms of bswap.
1973         (bswap_flt64) Ditto.
1974
1975         * str.c: (ds_data) Add external definition here, needed because
1976         str.h has only an `extern inline' version.
1977
1978         * value-labels.c: Fix includes.
1979
1980 Mon Nov 15 00:40:55 2004  Ben Pfaff  <blp@gnu.org>
1981
1982         Instead of providing a system or portable file writer with a raw
1983         case in the format needed for output, provide it with a regular
1984         case.  The writer takes care of any needed translation.
1985
1986         * aggregate.c: Adopt new scheme for AGGREGATE.
1987         (struct agr_proc) sfm_agr_case member removed.
1988         (write_case_to_sfm) Removed because the new interface is easier to
1989         use.
1990
1991         * get.c: Adopt new scheme for SAVE, XSAVE, EXPORT.
1992
1993         * pfm-write.c: Implement new scheme.
1994
1995         * sfm-write.c: Ditto.
1996
1997 Mon Nov 15 00:32:24 2004  Ben Pfaff  <blp@gnu.org>
1998
1999         Instead of treating `struct file_handle' as a class to subclass
2000         into data files, system files, and portable files, instead use it
2001         as a helper that coordinates access.  Now it is opaque, too.
2002
2003         This means that most references to a struct file_handle are now
2004         changed into references to one of struct dfm_reader, struct
2005         dfm_writer, struct sfm_reader, struct sfm_writer, struct
2006         pfm_reader, or struct pfm_writer, according to what's being read
2007         or written.
2008
2009         Most related changes are only worth summarizing briefly.
2010
2011         * dictionary.c: (dict_clear) Destroy aux data in deleted
2012         variables.
2013         (dict_clear_aux) New function.
2014         (dict_create_var) Initialize aux, aux_dtor.
2015         (dict_delete_var) Destroy aux data in deleted variable.
2016
2017         * file-handle.h: (struct fh_ext_class) Removed.
2018         (struct file_handle) Removed.
2019         (fh_init_files) Removed.
2020
2021         * file-handle.q: Changed references to a handle's `private' member
2022         to direct references.
2023         (struct private_file_handle) Renamed file_handle.
2024         Add next, open_cnt, type, open_mode, aux members.
2025         (struct file_handle_list) Removed.
2026         (extern var inline_file) Removed.
2027         (static var file_handles) Changed from file_handle_list * to
2028         file_handle *.
2029         (create_file_handle) Initialize new members.
2030         (fh_close_handle) Removed.
2031         (mode_name) New function.
2032         (fh_open) New function.
2033         (fh_close) New function.
2034         (fh_parse_file_handle) Renamed fh_parse().
2035
2036         * glob.c: (init_glob) Remove fh_init_files() call.
2037         
2038         * aggregate.c: use sfm_writer.
2039         (create_sysfile) Removed because the new interface is simpler.
2040         
2041         * apply-dict.c: Use sfm_reader.
2042
2043         * data-list.c: Use dfm_reader.
2044
2045         * file-type.c: Use dfm_reader.
2046
2047         * get.c: Use sfm_reader, sfm_writer, pfm_reader, pfm_writer.
2048
2049         * inpt-pgm.c: Use dfm_reader.
2050
2051         * print.c: Use dfm_writer.
2052
2053         * sysfile-info: Use sfm_reader.
2054
2055         * dfm-read.c: Adopt new file handle infrastructure.
2056
2057         * dfm-write.c: Ditto.
2058
2059         * pfm-read.c: Ditto.
2060         
2061         * pfm-write.c: Ditto.
2062
2063         * sfm-read.c: Ditto.
2064
2065         * sfm-write.c: Ditto.
2066         
2067 Mon Nov 15 00:31:44 2004  Ben Pfaff  <blp@gnu.org>
2068
2069         Break dictionary functions into separate header file.
2070
2071         * dictionary.h: New file.
2072
2073         * var.h: Moved dict_*() functions to dictionary.h.
2074
2075 Mon Nov 15 00:30:33 2004  Ben Pfaff  <blp@gnu.org>
2076
2077         Get rid of procedure-specific union in struct variable, using
2078         instead a void * pointer and a destructor function.
2079
2080         Most related changes are only worth brief summaries.
2081
2082         * crosstabs.q: Fix includes.  Use new struct var_range in lieu of
2083         old p.crs member in struct variable.
2084         
2085         * frequencies.q: Fix includes.  Use new struct var_freqs in lieu
2086         of old p.frq member in struct variable.
2087
2088         * histogram.c: (draw_histogram) Takes new freq_tab arg because
2089         it's no longer possible to grab this from var->p.frq.
2090
2091         * piechart.c: (draw_piechart) Ditto.
2092
2093         * group.c: (group_proc_get) New function.
2094
2095         * levene.c: Use group_proc_get() in lieu of old p.grp_data member
2096         in struct variable.
2097
2098         * oneway.q: Ditto.
2099
2100         * t-test.q: Ditto.
2101
2102         * main.c: (execute_command) Clear aux data in default_dict after
2103         each command.  (It's debatable whether this should be done.)
2104
2105         * matrix-data.c: Use new struct mxd_var in lieu of old p.mxd
2106         member in struct variable.
2107
2108         * means.q: Get rid of integer mode, which is not included in
2109         recent SPSS and was the only code that wanted per-variable private
2110         data.
2111
2112         * var.h: (struct crosstab_proc) Removed.
2113         (struct frequencies_proc) Removed.
2114         (struct list_proc) Removed.
2115         (struct get_proc) Removed.
2116         (struct means_proc) Removed.
2117         (struct matrix_data_proc) Removed.
2118         (struct match_files_proc) Removed.
2119         (lots of enums) Removed.
2120         (struct variable) Removed members `p', `get'.  Add member
2121         `aux_dtor'.
2122
2123         * vars-atr.c: (var_attach_aux) New function.
2124         (var_detach_aux) New function.
2125         (var_clear_aux) New function.
2126         (var_dtor_free) New function.
2127         (discard_variables) Use NULL instead of inline_file.
2128
2129 Fri Nov 12 10:07:11 WST 2004 John Darrington <john@darrington.wattle.id.au>
2130
2131         * value-labs.c  Fixed the implmentation of value_to_string, so 
2132         that it properly handles alpha values.
2133
2134         * oneway.q  Changed instances where labels were being probed manually, 
2135         to use the canonical {var,value}_to_string functions
2136
2137 Thu Nov 11 21:01:31 WST 2004 John Darrington <john@darrington.wattle.id.au>
2138
2139         * examine.q cartesian.c chart.[ch]   Added normal and detrended normal
2140         plots.  Changed the API of the cartesian plot to be a much lower level
2141         thing.
2142
2143 Sun Nov  7 17:25:04 WST 2004 John Darrington <john@darrington.wattle.id.au>
2144
2145         * examine.q Added some of the parametric calculations
2146
2147         * factor_stats.[ch]  Created
2148         
2149 Sat Nov  6 21:24:31 WST 2004 John Darrington <john@darrington.wattle.id.au>
2150
2151         * examine.q  Changed the definition of factors to be a composite, and
2152         dealt with the consequences.
2153
2154 Sat Nov  6 20:40:38 WST 2004 John Darrington <john@darrington.wattle.id.au>
2155
2156         * examine.q Fixed problem where examine wasn't dealing properly with 
2157         splits
2158
2159 Sat Nov  6 14:49:47 WST 2004 John Darrington <john@darrington.wattle.id.au>
2160
2161         * oneway.q Fixed problem where oneway wasn't dealing properly with 
2162         splits
2163
2164 Thu Nov  4 11:09:01 WST 2004 John Darrington <john@darrington.wattle.id.au>
2165
2166         * q2c.c examine.q  Fixed a bug (feature?) whereby arrays in the
2167         command which had settings didn't get the appropriate code
2168         generated.
2169
2170         * val.h value-labels.[ch] var-labs.c Added v*to_string functions
2171         to convert variables/values to strings.
2172
2173         * examine.q  Added framework for the EXAMINE command.
2174
2175 Mon Nov  1 12:46:17 WST 2004 John Darrington <john@darrington.wattle.id.au>
2176
2177         * q2c.c frequencies.q set.q t-test.q  Fixed the q2c parsing of DBL 
2178         subcommand types.  Changed frequencies.q to use it rather then the 
2179         custom parser.  Dealt with the consequences.  Added a test for NTILES
2180         subcommand of frequencies.
2181
2182 Sat Oct 30 09:16:29 WST 2004 John Darrington <john@darrington.wattle.id.au>
2183
2184         * oneway.q   Fixed up the behaviour when given missing values
2185
2186         * levene.c oneway.q Fixed a buglet with the levene statistic and
2187         incorporated the levene test into the oneway command.
2188
2189         * group.h  t-test.q  Moved the CMP_EQ and CMP_LE symbols out of 
2190         global scope, since they're only relevant to T-TEST
2191
2192 Fri Oct 29 17:39:03 WST 2004 John Darrington <john@darrington.wattle.id.au>
2193
2194         * group.c group.h group_proc.h levene.c oneway.q t-test.q
2195
2196         Made the t-test more consistent
2197         with the way it handles groups.  That is, it now uses a hash instead
2198         of an array of 2.  Also, made the levene.c file independent of the 
2199         implementation of the t-test.  So now levene should be fine for both
2200         t-test and anova.
2201
2202         * Added an oneway.q file for one way anova
2203
2204 Wed Jun  2 22:08:02 2004  Ben Pfaff  <blp@gnu.org>
2205
2206         * descript.c: (cmd_descriptives) Remove harmless but bogus test in
2207         STATISTICS parsing.
2208
2209 Mon May 31 20:45:24 2004  Ben Pfaff  <blp@gnu.org>
2210
2211         Fix memory leaks.
2212
2213         * data-list.c: (cmd_data_list) Free dls->delims on lossage.
2214         (data_list_trns_free) Free dls->delims.
2215
2216         * t-test.q: (tts_custom_pairs) Free vars.
2217         (ssbox_one_sample_init) Fix tab_vline() argument.
2218         (ssbox_independent_samples_init) Ditto.
2219         (trbox_paired_init) Ditto.
2220         (trbox_one_sample_init) Ditto.
2221
2222 Mon May 31 17:19:27 2004  Ben Pfaff  <blp@gnu.org>
2223
2224         Generalize casefiles to the extent that we can use them for
2225         sorting and other kinds of data transformations.  Change cases to
2226         be copy-on-write to improve memory efficiency in common cases.
2227         Every access to a member of a `struct ccase' was changed to be a
2228         call to a case_*() function, especially case_data(), case_num(),
2229         case_str(), or case_data_rw().  Many instances of a local variable
2230         named "case_num" were changed to "case_idx" as a consequence.
2231         Many `struct ccase *' were changed to actual `struct ccase'
2232         because of copying semantics of cases.  In several places there
2233         was a choice between updating debug code to work with the new ADTs
2234         or just deleting it because it was useless; I chose to delete it.
2235  
2236         * Makefile.am: (pspp_SOURCES) Add case.c, case.h.
2237
2238         * case.c: New file.
2239
2240         * case.h: New file.
2241
2242         * aggregate.c: (struct agr_proc) Change type of `sort' to
2243         sort_criteria *.  Add `break_vars', `break_var_cnt' members.
2244         Rename `vars' to `agr_vars', all references updated.  Change
2245         `agr_case' to type `struct ccase'.
2246         (cmd_aggregate) Deal with new members.  Use case_create(),
2247         sort_active_file_in_place(), sort_active_file_to_casefile().
2248         (agr_destroy) Deal with new members.
2249         (aggregate_single_case) Ditto.
2250         (dump_aggregate_info) Ditto.
2251         (initialize_aggregate_info) Ditto.
2252         (agr_to_active_file) Ditto.
2253         (presorted_agr_to_sysfile) Ditto.
2254         (sort_agr_to_sysfile) Removed.
2255
2256         * alloc.c: (out_of_memory) Make non-static.
2257
2258         * alloc.h: Prototype out_of_memory().
2259
2260         * casefile.c: Switched from a linked list in-memory representation
2261         to a two-level array-style representation.  The linked list was
2262         appropriate when we could stick a header onto cases, but that's no
2263         longer the case.  Also, the two-level array will allow for random
2264         in-memory access in case that's ever wanted.  Also added the
2265         concept of a `destructive casereader', one that destroys cases in
2266         the underlying casefile as they are read out.
2267         (macro CASES_PER_BLOCK) New macro.
2268         (struct casefile) New members `value_cnt', `case_list_size',
2269         `case_acct_size', `being_destroyed', `cases'.  Removed `head',
2270         `tail'.
2271         (struct casereader) Removed `cur'.  Added `destructive', `c'.
2272         (global var casefiles) Made static.
2273         (static var case_bytes) New var.
2274         (casefile_create) Takes a value count, not a case size in bytes,
2275         to conform to the case interface.  All callers updated.  Deal with
2276         new and removed members.
2277         (casefile_destroy) Deal with new and removed members.
2278         (casefile_sleep) New function.
2279         (casefile_get_case_size) Removed.
2280         (casefile_get_value_cnt) New function.
2281         (casefile_append) Rewritten to deal with new and removed members.
2282         (casefile_append_xfer) New function.
2283         (write_case_to_disk) Use case_serialize().
2284         (call_posix_fadvise) Removed because posix_fadvise64 segfaults.
2285         Couldn't figure out why.
2286         (casefile_to_disk) Don't call call_posix_fadvise.  Rewritten to
2287         deal with new and removed members.
2288         (merge) Removed.
2289         (merge_sort) Removed.
2290         (casefile_sort) Removed.
2291         (casefile_get_reader) Deal with new and removed members.
2292         (casefile_get_destructive_reader) New function.
2293         (reader_open_file) Make code more readable.  Create case for
2294         reader.
2295         (casereader_get_casefile) New function.
2296         (casereader_read) Deal with new and removed members.  Now returns
2297         a copy of the case, so that the caller is responsible for
2298         destroying the returned case.
2299         (casereader_read_xfer) New function.
2300         (casereader_destroy) Destroy reader's case.
2301         (test_casefile) Second arg is now a value count, all callers
2302         updated.  Now tests destructive readers too.
2303         (get_random_case) Deal with new case ADT.
2304         (write_random_case) Ditto.
2305         (read_and_verify_random_case) Ditto.
2306
2307         * crosstabs.q: Remove debug code.
2308
2309         * descript.q: (calc_descriptives) Deal with new case, casefile
2310         ADTs.
2311
2312         * dfm.c: (cmd_begin_data) There's no storage_source_class anymore.
2313
2314         * do-if.c: Remove unneeded header inclusion.
2315
2316         * expr-prs.c: Remove debug code.
2317
2318         * exprP.h: Remove debug code.
2319
2320         * flip.c: (flip_file) Use fseeko() if available.
2321
2322         * formats.c: Remove debug code.
2323
2324         * get.c: Remove debug code.
2325         (struct mtf_file) Change `input' from `union value *' to `struct
2326         ccase', all references updated.
2327
2328         * levene.c: (levene) Deal with new case, casefile ADTs.
2329
2330         * list.q: Remove debug code.
2331
2332         * loop.c: Remove debug code.
2333         
2334         * matrix-data.c: Remove debug code.
2335
2336         * means.q: Remove debug code.
2337
2338         * mis-val.c: Remove debug code.
2339
2340         * pfm-read.c: Remove debug code.
2341         (pfm_read_code) Change second arg from `union value *' to `struct
2342         ccase *', all references updated.
2343
2344         * recode.c: (string_to_long) Make first arg const.
2345         (convert_to_double) Ditto.
2346
2347         * repeat.c: Remove debug code.
2348
2349         * sample.c: Remove debug code.
2350
2351         * sfm-read.c: Remove debug code.
2352         (sfm_read_case) Change second arg from `union value *' to `struct
2353         ccase *'.
2354
2355         * sort.c: Redone in terms of casefiles.
2356         (enum sort_direction) Moved here from sort.h.
2357         (struct sort_criterion) New structure.
2358         (struct sort_criteria) New structure.
2359         (cmd_sort_cases) Rewritten.
2360         (prepare_to_sort_active_file) New function.
2361         (sort_active_file_in_place) New function.
2362         (sort_active_file_to_casefile) New function.
2363         (parse_sort) Renamed sort_parse_criteria(), rewritten & interface
2364         changed, all callers updated.
2365         (destroy_sort_cases_pgm) Renamed sort_destroy_criteria(),
2366         rewritten & interface changed, all callers updated.
2367         (sort_cases) Renamed sort_execute(), rewritten & interface
2368         changed, all callers updated.
2369         (struct internal_sort) Removed.
2370         (do_internal_sort) Rewritten, interface changed.
2371         (destroy_internal_sort) Removed.
2372         (compare_case_dblptrs) Use sort_criteria instead of sort_case_pgm.
2373         (struct initial_run) Removed; an initial run is now just a
2374         casefile.
2375         (compare_initial_runs) Rewritten.
2376         (struct external_sort) Changed almost completely.
2377         (do_external_sort) Rewritten, interface changed.
2378         (destroy_external_sort) Rewritten.
2379         [HAVE_MKDTEMP] (make_temp_dir) Removed.
2380         [!HAVE_MKDTEMP] (do_mkdir) Removed.
2381         [!HAVE_MKDTEMP] (make_temp_dir) Removed.
2382         (init_external_sort) Removed.
2383         (simulate_error) Removed.
2384         (rmdir_temp_dir) Removed.
2385         (get_temp_file_name) Removed.
2386         (open_temp_file) Removed.
2387         (close_temp_file) Removed.
2388         (remove_temp_file) Removed.
2389         (write_temp_file) Removed.
2390         (read_temp_file) Removed.
2391         (struct record_run) Change `record' from `struct case_lit *' to
2392         `struct ccase'.
2393         (struct initial_run_state) Remove `idx_to_fv', `free_list',
2394         `file_idx', `output_file'.  Add `run', casefile'.  Change
2395         `last_output' from `struct case_list *' to `struct ccase'.
2396         (write_initial_runs) Change interface, rewrite.
2397         (sort_sink_write) Renamed process_case(), changed interfaced,
2398         rewrote.
2399         (destroy_initial_run_state) Rewritten.
2400         (allocate_cases) Rewritten.
2401         (compare_record) Interface changed, rewritten.
2402         (start_run) Rewritten.
2403         (end_run) Rewritten.
2404         (output_record) Rewritten.
2405         (grab_case) Removed.
2406         (release_case) Removed.
2407         (struct merge_case) Change `cases' from double pointer to single
2408         pointer.
2409         (merge) Deal with new case and casefile ADTs.
2410         (struct run) Removed.
2411         (merge_once) Rewritten, interface changed.
2412         (fill_run_buffer) Removed.
2413         (sort_sink_make_source) Removed.
2414         (sort_sink_class) Removed.
2415         (struct sort_source_aux) Removed.
2416         (sort_source_read_helper) Removed.
2417         (sort_source_read) Removed.
2418         (read_sort_output) Removed.
2419         (read_internal_sort_output) Removed.
2420         (read_external_sort_output) Removed.
2421         (sort_source_destroy) Removed.
2422         (sort_source_class) Removed.
2423
2424         * sort.h: (struct sort_cases_pgm) Removed.
2425         (enum sort_direction) Moved to sort.c.
2426
2427         * t-test.q: (calculate) Deal with new case, casefile ADTs.
2428
2429         * tab.c: Remove debug code.
2430
2431         * var-labs.c: Remove debug code.
2432
2433         * var.h: (struct ccase) Removed.
2434         (struct case_list) Removed.
2435
2436         * vars-atr.c: (discard_variables) Use free_case_source().
2437
2438         * vars-prs.c: (parse_vs_variable) Make arg const.
2439         (parse_dict_variable) Ditto.
2440         (parse_variables) Make struct dictionary * arg const.
2441         (parse_var_set_vars) Make struct var_set * arg const.
2442         (struct var_set) Add const to some of the function pointers' args.
2443         (var_set_get_cnt) Make arg const.
2444         (var_set_get_var) Make first arg const.
2445         (var_set_lookup_var) Make first arg const.
2446         (dict_var_set_get_cnt) Make arg const.
2447         (dict_var_set_get_var) Make first arg const.
2448         (dict_var_set_lookup_var) Make first arg const.
2449         (var_set_create_from_dict) Make arg const.  Add cast to aux
2450         assignment.
2451         (struct array_var_set) Add const to var member.
2452         (array_var_set_get_cnt) Make arg const.
2453         (array_var_set_get_var) Make first arg const.
2454         (array_var_set_lookup_var) Make first arg const.
2455         (var_set_create_from_array) Make first arg const.  Insert cast.
2456
2457         * vfm.c: (struct write_case_data) Change trns_case, sink_case
2458         members from `struct ccase *' to `struct ccase'.
2459         (static var lag_queue) Change from double to single pointer.
2460         (procedure) Optimize trivial case.
2461         (internal_procedure) Deal with changed case, case_source ADTs.
2462         (create_trns_case) Changed interface, rewrote.
2463         (open_active_interface) Initialize modified lag queue.
2464         (write_case) Deal with changed case ADT.
2465         (lag_case) Deal with modified lag queue.
2466         (close_active_file) Destroy modified lag queue.
2467         Deal with changed case_source, case_sink ADTs.
2468         (destroy_storage_stream_info) Make null arg into no-op.
2469         (storage_sink_make_source) Set aux in created source.
2470         (storage_source_read) Deal with changed case, casefile ADTs.
2471         (storage_source_create) New function.
2472         (lagged_case) Rewrite.
2473         (free_case_source) New function.
2474         (free_case_sink) Rewrite.
2475         (struct split_aux_data) Changed prev_case from `struct ccase *' to
2476         `struct ccase'.
2477         (procedure_with_splits) Deal with changed prev_case.
2478         (procedure_with_splits_callback) Ditto.
2479         (multipass_split_aux_data) Changed prev_case from `struct ccase *' to
2480         `struct ccase'.
2481         (multipass_procedure_with_splits) Deal with changed prev_case.
2482         (multipass_split_callback) Ditto.
2483         
2484         
2485 Mon May 31 17:19:06 2004  Ben Pfaff  <blp@gnu.org>
2486
2487         The workspace idea didn't work out.
2488
2489         * Makefile.am: (pspp_SOURCES) Remove workspace.c, workspace.h.
2490         
2491         * workspace.c: Removed.
2492
2493         * workspace.h: Removed.
2494
2495 Sun May 30 18:35:19 2004  Ben Pfaff  <blp@gnu.org>
2496
2497         Fully implement arbitrary delimiters on DATA LIST, extending the
2498         half implementation that was already there.
2499
2500         * data-list.c: (struct data_list_pgm) Remove `delim', add
2501         `delims', `delim_cnt'.
2502         (cmd_data_list) Initialize new members.  Parse delimiters and
2503         clean up code a bit.
2504         (cut_field) Extract fields with arbitrary delimiters.  Also, fix
2505         handling of leading commas.
2506         (read_from_data_list_fixed) Expand tabs.  Adapt to new DFM
2507         interfaces.
2508         (read_from_data_list_free) Adapt to new DFM interfaces.
2509         (read_from_data_list_list) Ditto.
2510         (repeating_data_trns_proc) Ditto.
2511
2512         * dfm.c: Split up reader and writer into separate code, because
2513         they do different things.  Use struct string instead of explicit
2514         allocation code, for clarity.
2515         (enum dfm_reader_flags) New enum.
2516         (struct dfm_fhuser_ext) Removed.
2517         (struct dfm_reader_ext) New.
2518         (get_reader) New function, used by just about all the reader
2519         functions.
2520         (dfm_close) Removed.
2521         (close_reader) New function.
2522         (dfm_open_for_reading) Rewrite initialization of dfm_fhuser_ext.
2523         (dfm_open_for_writing) Ditto.
2524         (macro force_line_buffer_expansion) Removed.
2525         (count_tabs) Removed.
2526         (tabs_to_spaces) Removed.
2527         (read_record) Deal with new dfm_reader_ext.  Use struct string
2528         functions.  Don't convert tabs to spaces.
2529         (dfm_eof) New function.
2530         (dfm_get_record) Changed interface, rewrote.
2531         (dfm_expand_tabs) New function.
2532         (dfm_fwd_record) Renamed dfm_forward_record(), updated to new
2533         dfm_reader_ext, rewritten.
2534         (dfm_bkwd_record) Renamed dfm_reread_record(), updated to new
2535         dfm_reader_ext, rewritten.
2536         (dfm_set_record) Removed in favor of dfm_forward_columns().
2537         (dfm_forward_columns) New function.
2538         (dfm_get_cur_col) Renamed dfm_column_start, updated to new
2539         dfm_reader_ext, rewritten.
2540         (static var dfm_r_class) Use close_reader for the destructor.
2541         (struct dfm_writer_ext) New.
2542         (dfm_put_record) Updated to new dfm_writer_ext, rewritten.  Uses
2543         bounce buffer now instead of local allocation.
2544         (close_writer) New function.
2545         (static var dfm_writer_ext) Use close_writer for destructor.
2546         (cmd_begin_data) Adapt to new dfm_reader_ext.
2547
2548         * file-handle.q: Add support for per-file tab width.
2549         (struct private_file_handle) Add tab_width member.
2550         (q2c specifications) Add tabwidth subcommand.
2551         (cmd_file_handle) Put parsed tab width into private_file_handle.
2552         (create_file_handle) Set default tab width.
2553         (handle_get_tab_width) New function.
2554
2555         * file-type.c: (file_type_source_read) Adapt to new DFM interface.
2556
2557         * inpt-pgm.c: (reread_trns_proc) Ditto.
2558
2559         * matrix-data.c: (context) Ditto.
2560         (another_token) Ditto.
2561         (mget_token) Ditto.
2562         (force_eol) Ditto.
2563
2564 Sun May 30 18:33:59 2004  Ben Pfaff  <blp@gnu.org>
2565
2566         * casefile.c: (casefile_destroy) Fix memory leak by freeing
2567         cf->filename.
2568         (casereader_destroy) Don't close file descriptor -1.
2569
2570         * recode.c: (cmd_recode) Fix memory leak.
2571
2572         * set.q: (q2c specifications) Fix typo in user message.
2573
2574         * str.c: (st_bare_pad_len_copy) Change memcpy to memmove to avoid
2575         undefined behavior for overlapping arguments.
2576
2577 Sun May 30 18:31:48 2004  Ben Pfaff  <blp@gnu.org>
2578
2579         * casefile.c: valgrind doesn't implement posix_fadvise() yet, so
2580         don't call it when we're running under valgrind.
2581         (call_posix_fadvise) New function.
2582         (casefile_to_disk) Use call_posix_fadvise().
2583         (reader_open_file) Ditto.
2584         
2585 Sun May 30 18:20:12 2004  Ben Pfaff  <blp@gnu.org>
2586
2587         Update our string ADTs, struct string and struct len_string.  Get
2588         rid of pool support, which was largely unused.  Rename lots of
2589         functions to have more obvious or consistent names.
2590         
2591         * ascii.c: Get rid of ascii_pool.  It was only used for string
2592         allocations.
2593         (ascii_open_global) Don't create ascii_pool.
2594         (ascii_close_driver) Don't destroy ascii_pool.
2595         (ascii_postopen_driver) Don't use pool.
2596         (ascii_close_driver) Destroy strings manually.
2597
2598         * str.c: (ds_create) Remove pool argument, all references updated.
2599         (ds_init) Ditto.
2600         (ds_replace) Remove pool support, make more efficient when we
2601         don't need to reallocate.
2602         (ds_destroy) Remove pool support.
2603         (ds_rpad) New function.
2604         (ds_size) Renamed ds_capacity(), all references updated.
2605         (ds_value) Renamed ds_c_str(), all references updated.
2606         (ds_concat) Renamed ds_puts(), all references updated.
2607         (ds_concat_buffer) Renamed ds_concat(), all references updated.
2608         (ds_putchar) Renamed ds_putc(), all references updated.
2609         (ds_getline) Renamed ds_gets(), all references updated.
2610         (ls_create) Remove pool argument, all references updated.
2611         (ls_create_buffer) Ditto.
2612         (ls_destroy) Removed pool support.
2613         (ls_value) Renamed ls_c_str(), all references updated.
2614
2615         * str.h: (ls_length) [__GNUC__] Add inline version.
2616         (ls_c_str) [__GNUC__] Add inline version.
2617         (ls_end) [__GNUC__] Add inline version.
2618         (struct string) Remove pool member.  Rename `size' to `capacity',
2619         all references updated.
2620
2621         * tab.c: (text_format) Instead of using pool argument to
2622         ls_create_buffer(), call pool_register() on allocated data.
2623
2624 Mon Apr 26 22:40:07 2004  Ben Pfaff  <blp@gnu.org>
2625
2626         We're abusing the current ASCII driver by telling it to allocate a
2627         9999-line, 9999-character page in the tests.  This causes some
2628         systems to curl up and die because it allocates 20 MB of
2629         contiguous RAM.  This change alleviates at least part of the
2630         problem.  It is mostly a stop-gap until the new output system is
2631         ready.
2632         
2633         * ascii.c: (struct line) New structure.
2634         (struct ascii_driver_ext) Remove `page', `page_size', `line_len',
2635         `line_len_size', `n_output' members.  Add `lines', `lines_cap'.
2636         (ascii_preopen_driver) Initialize new members, not old ones.
2637         (ascii_close_driver) Destroy new members, not old ones.
2638         (ascii_open_page) Allocate new members, not old ones.
2639         (expand_line) Allocate room in line.
2640         (draw_line) Use new members.
2641         (ascii_line_horz) Ditto.
2642         (ascii_line_vert) Ditto.
2643         (ascii_line_intersection) Ditto.
2644         (text_draw) Ditto.
2645         (output_lines) Ditto.
2646         (ascii_close_page) Ditto.
2647
2648 Sun Apr 25 23:40:15 2004  Ben Pfaff  <blp@gnu.org>
2649
2650         * matrix.c: Dead code.  Removed.
2651
2652         * matrix.h: Dead code.  Removed.
2653
2654 Fri Apr 16 23:59:51 2004  Ben Pfaff  <blp@gnu.org>
2655
2656         Contrary to what I'd always understood, there is an efficient
2657         algorithm for deletion from a hash table populated via linear
2658         probing.  This change implements it.
2659         
2660         * hash.c: (hsh_rehash) Probe in increasing order.
2661         (hsh_probe) Ditto.
2662         (locate_matching_entry) Ditto.
2663         (hsh_delete) Use Knuth's Algorithm 6.4R for deletion.
2664
2665 Tue Apr 13 19:24:15 2004  Ben Pfaff  <blp@gnu.org>
2666
2667         * moments.c (calc_moments): Adjust calculation of kurtosis to
2668         avoid subtracting huge numbers from huge numbers, on Michael
2669         Kiefte's advice.
2670
2671 Sun Apr 11 14:22:12 2004  Ben Pfaff  <blp@gnu.org>
2672
2673         Rework moments routines for improved numerical stability based on
2674         Michael Kiefte's advice.  Any bugs or remaining numerical problems
2675         are still mine though.
2676
2677         There is now a struct moments1 for use with one-pass moments.  It
2678         uses a provisional means algorithm as an attempt to improve
2679         accuracy of higher moments.  The older struct moments now only
2680         handles two-pass moments.
2681         
2682         * aggregate.c: Use moments1 instead moments.
2683
2684         * descript.c: Revert previous change, which is no longer needed
2685         due to the moments revision.
2686
2687         * moments.c: (calc_moments) New function for calculating variance,
2688         skewness, kurtosis.
2689         (moments_pass_one) Only accumulate weights bigger than zero.
2690         (moments_calculate) Allow calculating the mean on pass one, others
2691         require pass two.  Implement in terms of calc_moments().
2692         (struct moments1) New structure.
2693         (init_moments1) New function.
2694         (moments1_clear) Ditto.
2695         (moments1_create) Ditto.
2696         (moments1_add) Ditto.
2697         (moments1_calculate) Ditto.
2698         (moments1_destroy) Ditto.
2699         (cmd_debug_moments) Deal with `struct moments' or `struct
2700         moments1' as requested by user.
2701
2702 Sun Apr 11 14:21:55 2004  Ben Pfaff  <blp@gnu.org>
2703
2704         * Makefile.am (pspp_SOURCES): Remove debug.c.
2705
2706         * debug.c: Removed.  It was empty anyway.
2707
2708 Fri Apr  9 20:04:49 2004  Ben Pfaff  <blp@gnu.org>
2709
2710         * descript.c (calc_descriptives): Fix assert failure when only
2711         MOMENT_MEAN is needed.
2712
2713 2004-04-09  Michael Kiefte  <mkiefte@dal.ca>
2714
2715         * descript.c: 
2716
2717         fixed problem with parsing in match_statistic() causing
2718         "DESCRIPTIVE STAT=MEAN." to barf.
2719
2720         "MEAN" is now default if "SORT" given without specification.
2721
2722         Fixed infinite loop with "DESCRIPT GIBBERISH=ALL."  Parsing is
2723         generally less forgiving of syntax errors: better to have it do
2724         nothing and type it in again then to not know what it actually did
2725         instead.  
2726
2727         z-score transformation now checks score for user-missing values
2728         and checks std_dev for SYSMIS.
2729
2730 2004-04-06  Michael Kiefte  <mkiefte@dal.ca>
2731
2732         * aggregate.c, crosstabs.q, descript.c, dictionary.c, frequencies.q, levene.c, t-test.q, var.h: 
2733         Changed dict_get_case_weight() to accept an additional int * flag
2734         to complain about system-missing, user-missing, zero, or negative
2735         weights and updated existing functions to pass int * to
2736         dict_get_case_weight().
2737
2738 2004-04-05  jmd  <jmd@gnu.org>
2739
2740         * main.c: Fixed configuration problems with gsl
2741
2742         * t-test.q: Fixed some problems encountered when compiling under Cygwin
2743
2744 2004-04-03  blp  <blp@gnu.org>
2745
2746         * lexer.c, ChangeLog:
2747         Fix infinite loop on comment at end of file, add test.
2748
2749 2004-04-03  jmd  <jmd@gnu.org>
2750
2751         * settings.h, var.h, ChangeLog, Makefile.am, cmdline.c, command.c, command.h, error.h, filename.c, frequencies.q, lexer.h, main.c, q2c.c, set.q:
2752         Fixed the calculation of percentiles and added --syntax and --algorithm options
2753
2754 Sat Apr  3 11:43:37 2004  Ben Pfaff  <blp@gnu.org>
2755
2756         * lexer.c: (lex_skip_comment) Handle end-of-file correctly (I
2757         hope).
2758
2759 Sat Apr  3 15:00:18 WST 2004 John Darrington <john@darrington.wattle.id.au>
2760
2761         * frequencies.q:  Fixed the calculation of percentiles
2762
2763         * Makefile.am:  Added the --ansi flag and dealt with the
2764         consequences.  Added some entries to PSPP_sources so that
2765         make distcheck would pass
2766
2767         * cmdline.c:   Added the --syntax and --algorithm options
2768
2769         * q2c.c:  Added an implicit /ALGORITHM subcommand to everything.
2770
2771 Fri Apr  2 11:25:22 WAST 2004 John Darrington <john@darrington.wattle.id.au>
2772
2773         * t-test.q, levene.c, levene.h  Converted t-test (incl levene) to 
2774         use the new multipass_split_... mechanism.
2775
2776 Wed Mar 31 22:36:22 2004  Ben Pfaff  <blp@gnu.org>
2777
2778         * frequencies.q: (calc_stats) Use moments data structure and
2779         calc_seskew(), calc_sekurt() functions.
2780
2781         * set.q main.c settings.h Added support for --syntax and --algorithm 
2782         options
2783
2784 Tue Mar 30 22:04:19 2004  Ben Pfaff  <blp@gnu.org>
2785
2786         * vfm.c: Had to get last call to multipass_split_output() inside
2787         open_active_file()/close_active_file() pairing, so introduce new
2788         function.
2789         (internal_procedure) Move procedure() code here, except for calls
2790         to open_active_file() and close_active_file().
2791         (procedure) Wrap open_active_file() and close_active_file() around
2792         internal_procedure().
2793         (multipass_procedure_with_splits) Wrap open_active_file() and
2794         close_active_file() around internal_procedure().
2795
2796 Tue Mar 30 22:01:57 2004  Ben Pfaff  <blp@gnu.org>
2797
2798         * descript.c: (cmd_descriptives) Free `vars' to avoid memory leak.
2799
2800 Mon Mar 29 16:26:40 2004  Ben Pfaff  <blp@gnu.org>
2801
2802         * debug.c: Removed.  Moved cmd_debug_evaluate() into expr-evl.c.
2803
2804         * expr-evl.c: (cmd_debug_evaluate) Moved here from debug.c.
2805
2806 Mon Mar 29 16:03:08 2004  Ben Pfaff  <blp@gnu.org>
2807
2808         * algorithm.c: By default turn off some of the more expensive
2809         assertions.
2810         (expensive_assert) New macro which expands to assert if
2811         EXTRA_CHECKS is defined, to nothing otherwise.
2812         (unique) Use expensive_assert().
2813         (binary_search) Ditto.
2814         (push_heap) Ditto.
2815         (pop_heap) Ditto.
2816         (make_heap) Ditto.
2817         (sort_heap) Ditto.
2818
2819         * command.c: (conflicting_3char_prefixes) Words that are the same
2820         don't cause conflicts when they are abbreviated to the first three
2821         letters.
2822
2823         * expr-evl.c: (CONCAT_func) Fix memory leak by incrementing struct
2824         nonterm_node's n earlier.
2825         (generic_str_func) Ditto.
2826         
2827 Mon Mar 29 15:32:17 2004  Ben Pfaff  <blp@gnu.org>
2828
2829         Add support for multipass procedures.  Rewrite DESCRIPTIVES to
2830         test multipass support, take advantage of new moments
2831         calculation, and to not be such crappy code.  Get rid of q2c
2832         processing for DESCRIPTIVES.
2833
2834         * vfm.c: (struct multipass_split_aux_data) New structure.
2835         (multipass_procedure_with_splits) New function.
2836         (multipass_split_callback) New function.
2837         (multipass_split_output) New function.
2838         * descript.q: Removed.
2839
2840         * descript.c: New file.
2841
2842         * var.h: Removed descriptives enums.
2843         (struct descriptives_proc) Removed.
2844         (struct variable) Removed p.dsc.
2845
2846         * Makefile.am: (q_sources_c) Remove descript.c.
2847         (q_sources_q) Removed descript.q.
2848         
2849 Mon Mar 29 15:31:55 2004  Ben Pfaff  <blp@gnu.org>
2850
2851         New manager for keeping track of used workspace.
2852         
2853         * workspace.c: New file.
2854
2855         * workspace.h: New file.
2856
2857         * Makefile.am: (pspp_SOURCES) Add workspace.c, workspace.h.
2858
2859         * sort.c: (do_internal_sort) Use workspace_malloc().
2860         (destroy_internal_sort) Use workspace_free().
2861
2862 Mon Mar 29 15:31:08 2004  Ben Pfaff  <blp@gnu.org>
2863
2864         New `struct casefile' for managing sets of cases.
2865
2866         * casefile.c: New file.
2867
2868         * casefile.h: New file.
2869
2870         * command.def: Add DEBUG CASEFILE command.
2871
2872         * Makefile.am: (pspp_SOURCES) Add casefile.c, casefile.h.
2873
2874         * sort.c: (sort_cases) Move logic for sending storage file to disk
2875         into do_external_sort().
2876         (struct internal_sort) Use an array of ccase pointers instead of a
2877         case_list.
2878         (do_internal_sort) Rewrite to handle casefiles.
2879         (compare_case_list) Removed.
2880         (compare_cases) New function.
2881         (compare_case_dblptrs) New function.
2882         (read_internal_sort_output) Deal with new struct internal_sort.
2883
2884         * vfm.c: (static var workspace_overflow) Removed.
2885         (struct storage_stream_info) Removed all the members.  Added
2886         struct casefile * member.
2887         (storage_sink_open) Use casefile.
2888         (open_storage_file) Removed.
2889         (write_storage_file) Removed.
2890         (storage_to_disk) Removed.
2891         (destroy_storage_stream_info) Use casefile.
2892         (storage_sink_write) Use casefile.
2893         (storage_sink_make_source) Use casefile.
2894         (storage_source_count) Use casefile.
2895         (storage_source_read) Use casefile.
2896         (storage_source_on_disk) Removed.
2897         (storage_source_get_cases) Removed.
2898         (storage_source_set_cases) Removed.
2899         (storage_source_get_casefile) New function.
2900         
2901 Mon Mar 29 15:30:09 2004  Ben Pfaff  <blp@gnu.org>
2902
2903         New `struct moments' for calculating moments.
2904
2905         * stats.c: Removed.
2906
2907         * stats.h: Removed.
2908
2909         * moments.c: New file.
2910
2911         * moments.h: New file.
2912
2913         * command.def: Add DEBUG MOMENTS command.
2914
2915         * Makefile.am: (pspp_SOURCES) Add moments.c, moments.h.  Remove
2916         stats.c, stats.h.
2917
2918         * aggregate.c: Modify AGGREGATE to use the new moments
2919         calculation, even if not in such a great way.
2920         (struct agr_var) Add `moments' member.
2921         (parse_aggregate_functions) Set `moments' member to null.
2922         (agr_destroy) Destroy `moments' member.
2923         (accumulate_aggregate_info) Use `moments' for standard deviation.
2924         (dump_aggregate_info) Ditto.
2925         (initialize_aggregate_info) Create or clear `moments'.
2926
2927         * misc.h: Add pow2(), pow3(), pow4() functions in place of sqr(),
2928         cube(), pow4() that were in stats.h.  All references updated.
2929
2930         * crosstabs.q: stats.h had chi-square significance functions.  Use
2931         GSL instead.
2932         (display_chisq) Use gsl_cdf_chisq_Q() instead of chisq_sig().
2933
2934         * expr-evl.c: (expr_evaluate) Use moments_of_values() for
2935         OP_CFVAR, OP_MEAN, OP_SD, OP_VARIANCE.
2936                 
2937 Fri Mar 26 14:21:23 2004  Ben Pfaff  <blp@gnu.org>
2938
2939         * dictionary.c: (dict_compact_values) Compacted values need to
2940         start off from 0.
2941
2942 Fri Mar 26 00:54:57 2004  Ben Pfaff  <blp@gnu.org>
2943
2944         * var-labs.c: (cmd_variable_labels) For compatibility, don't allow
2945         `/' at start.  Check return value of parse_variables() for error
2946         return.
2947
2948 Fri Mar 26 00:19:27 2004  Ben Pfaff  <blp@gnu.org>
2949
2950         Revamp expressions: make the code a little nicer, and fix bugs
2951         found in testing.
2952         
2953         * expr-evl.c: (expr_evaluate) Make expression argument const.
2954         Support OP_ADD, OP_SUB, OP_MUL, OP_DIV instead of OP_PLUS, OP_MUL.
2955         OP_POW is missing for arg 2 <= 0.  OP_LOG is natural log, not
2956         base-10 log.  Fix OP_ANY, OP_ANY_STRING, OP_RANGE, OP_RANGE_STRING
2957         off-by-ones.  Add OP_MAX_STRING, OP_MIN_STRING.  Fix OP_TIME_HMS,
2958         OP_DATE_WKYR boundary conditions.  Add OP_CTIME_DAYS,
2959         OP_CTIME_HOURS, OP_CTIME_MINUTES, OP_CTIME_DAYS, OP_CTIME_SECONDS.
2960         Support OP_INDEX_2, OP_INDEX_3, OP_RINDEX_2, OP_RINDEX_3 instead
2961         of OP_INDEX, OP_INDEX_OPT, OP_RINDEX, OP_RINDEX_OPT.  Merge
2962         OP_LPAD_OPT into OP_LPAD, OP_RPAD_OPT into OP_RPAD, OP_LTRIM_OPT
2963         into OP_LTRIM, OP_RTRIM_OPT into OP_RTRIM, OP_NUMBER_OPT into
2964         OP_NUMBER.  Fix OP_RTRIM fragility.  Support OP_SUBSTR_2,
2965         OP_SUBSTR_3 instead of OP_SUBSTR, OP_SUBSTR_OPT.  Remove OP_INV.
2966         Simplify OP_SYSMIS.  Remove OP_STR_MIS.
2967
2968         * expr-opt.c: (optimize_expression) Rewrite.
2969         (macro n0) Removed.
2970         (macro n1) Removed.
2971         (macro n2) Removed.
2972         (macro s0) Removed.
2973         (macro s0l) Removed.
2974         (macro s1) Removed.
2975         (macro s1l) Removed.
2976         (macro s2) Removed.
2977         (macro s2l) Removed.
2978         (macro s) Removed.
2979         (macro sl) Removed.
2980         (eq_num_con) New function.
2981         (optimize_tree) New function.
2982         (macro rnc) Removed.
2983         (macro frnc) Removed.
2984         (str_search) Add const to string params.
2985         (str_rsearch) Ditto.
2986         (evaluate_tree_no_missing) Renamed from evaluate_tree.  Add num[],
2987         str[], str_len[] locals to substitute for most of removed macros.
2988         Support OP_ADD, OP_SUB, OP_MUL, OP_DIV instead of OP_PLUS, OP_MUL.
2989         Removed support for missing values because we're never called with
2990         missing values.  Use set_number() or set_number_errno() instead of
2991         rnc or frnc.  Removed any stuff that caused trouble in testing.
2992         We can re-add it later if it really slows anything.  Fix some
2993         random problems.
2994         (evaluate_tree_with_missing) Not yet supported.  To be added later
2995         if it's important.
2996         (repl_num_con) Removed.
2997         (collapse_node) New function.
2998         (force_repl_num_con) Removed.
2999         (set_number) New function.
3000         (set_number_errno) New function.
3001         (repl_str_con) Removed.
3002         (set_string) New function.
3003         (yrmoda) Tighten boundary conditions.  Adopt 2030 cut-off for
3004         2-digit years.
3005         (dump_node) No special case for OP_AND, OP_OR.
3006
3007         * expr-prs.c: (expr_prs) Honor EXPR_NO_OPTIMIZE bit.  Rewrite.
3008         (expr_get_type) New function.
3009         (type_check) Rewrite.
3010         (type_coercion) New function.
3011         (struct operator) New structure.
3012         (match_operator New function.
3013         (parse_binary_operators) New function.
3014         (parse_inverting_unary_operator) New function.
3015         (parse_or) Rewritten.
3016         (parse_and) Rewritten.
3017         (parse_not) Rewritten.
3018         (parse_rel) Rewritten.
3019         (parse_add) Rewritten.
3020         (parse_mul) Rewritten.
3021         (parse_neg) Rewritten.
3022         (parse_exp) Rewritten.
3023         (parse_sysvar) Add $TRUE, $FALSE system variables.
3024         Get $LENGTH, $WIDTH from get_viewlength(), get_viewwidth().
3025         (parse_primary) Use allocate_var_node(), allocate_num_con(),
3026         allocate_str_con().
3027         (struct function) Remove desc, change `func' prototype.
3028         (unary_func) Remove special cases.
3029         (MISSING_func) Reduce to unary_func() that just returns a boolean.
3030         (SYSMIS_func) Handle SYSMIS((x)) like SYSMIS(x).
3031         (VALUE_func) Use allocate_var_node().
3032         (nary_num_func) Allow MIN and MAX for strings.
3033         Use allocate_var_node().  Properly clean up.
3034         Fix return type.
3035         (generic_str_func) Use local table instead of removed `desc'
3036         member.  Mostly rewrite.
3037         (get_num_args) Revise error message.
3038         (parse_function) Return EXPR_ERROR, not 0 on error.
3039         (macro op) Removed.
3040         (macro varies) Removed.
3041         (ops[]) Use expr.def.
3042         (free_node) Do nothing if node is null.
3043         (allocate_num_con) New function.
3044         (allocate_str_con) New function.
3045         (allocate_var_node) New function.
3046         (allocate_binary_nonterminal) New function.
3047         (append_nonterminal_arg) Removed.
3048         (static var func_tab[]) Revised.
3049         (expr_debug_print_postfix) Make parameter const.
3050         Use printf() instead of debug_printf().
3051
3052         * expr.def: New file.
3053         
3054         * expr.h: Change PXP_* to EXPR_*, all references updated.  Also
3055         use named enum instead of unnamed, all references updated.  Add
3056         EXPR_ANY, EXPR_NO_OPTIMIZE.
3057
3058         * exprP.h: Remove EX_*.  Add DEFINE_OPERATOR.  Use expr.def
3059         instead of defining OP_* directly.
3060         (macro IS_TERMINAL) New macro.
3061         (macro IS_NONTERMINAL) New macro.
3062         (enum OP_NO_FLAGS) New.
3063         
3064 Fri Mar 26 00:18:01 2004  Ben Pfaff  <blp@gnu.org>
3065
3066         * error.c: (err_assert_fail) msg variable needs to be non-const.
3067
3068 Fri Mar 26 00:17:24 2004  Ben Pfaff  <blp@gnu.org>
3069
3070         * debug.c: (cmd_debug_evaluate) Rewrite.
3071
3072 Fri Mar 26 00:15:13 2004  Ben Pfaff  <blp@gnu.org>
3073
3074         Fix some CROSSTABS bit rot stupidity.
3075
3076         * crosstabs.q: Reorder the CELLS subcommands for compatibility.
3077         (internal_cmd_crosstabs) Initializes cells[] correctly.
3078         (float_M_suffix) Rename format_cell_entry(), change prototype,
3079         rewrite.
3080         (display_crosstabulation) Fix cell formatting.
3081
3082 Fri Mar 26 00:14:09 2004  Ben Pfaff  <blp@gnu.org>
3083
3084         Make lex_rest_of_line(), lex_entire_end() not discard lines.  Have
3085         to call lex_discard_line() to do that.
3086
3087         * command.c: (run_command) Call lex_discard_line() after
3088         lex_rest_of_line().
3089
3090         * lexer.c: (lex_entire_end) Change behavior.
3091         (lex_rest_of_line) Change behavior.  Return const char *.
3092         (lex_discard_line) Don't clear getl_buf, don't emit message.
3093
3094         * main.c: (handle_error) Emit message here.
3095
3096         * repeat.c: (internal_cmd_do_repeat) Use lex_discard_line()
3097         instead of lex_entire_line().
3098
3099         * str.c: (mm_find_reverse) Make length params size_t.  Rewrite.
3100
3101         * title.c: (get_title) Call lex_discard_line() after
3102         lex_rest_of_line().
3103         (cmd_file_label) Ditto.
3104         (cmd_document) Deal with const char * return value.
3105
3106 Fri Mar 26 00:10:16 2004  Ben Pfaff  <blp@gnu.org>
3107
3108         Removed REMARK command.
3109
3110         * command.c: (extract_prefix) Removed.
3111         (output_line) Removed.
3112         (cmd_remark) Removed.
3113
3114         * command.def: Remove REMARK.
3115
3116 Fri Mar 26 00:08:38 2004  Ben Pfaff  <blp@gnu.org>
3117
3118         Added abort() after lots of assert(0) invocations to avoid some
3119         compiler warnings.  We really need a NOT_REACHED macro.
3120
3121 Tue Mar 23 08:00:42 WAST 2004 John Darrington <john@darrington.wattle.id.au>
3122
3123         * sort.c: Added missing call to temp_file_close.  Changed error 
3124         messages to warnings.
3125
3126         * set.q: Improved setting of set_view{length,width} to be more tolerant
3127         of buggy OSes.
3128
3129 Sun Mar 21 10:11:14 WST 2004 John Darrington <john@darrington.wattle.id.au>
3130
3131         * val-labs.c: Fixed a bug where PSPP would crash, if VALUE LABELS was
3132         used with incorrect syntax.
3133
3134         * error.c, error.h et al:  Overridden definition of assert for a
3135         custom one.
3136
3137         * test-q.c: Fixed a buglet where it would crash if no /VARIABLES
3138         subcommand was given when it ought to have been.
3139
3140 Sat Mar 20 22:19:08 2004  Ben Pfaff  <blp@gnu.org>
3141
3142         * tab.c: (tab_vline) Fix assertions to respect row_ofs and
3143         col_ofs.
3144         (tab_hline) Ditto.
3145         (tab_box) Ditto.
3146         (tab_joint_text) Ditto.
3147
3148 Sat Mar 20 17:57:23 2004  Ben Pfaff  <blp@gnu.org>
3149
3150         * levene.c: Add #include.
3151
3152         * set.q: (set_viewport) Add `int' argument to make its prototype
3153         correct for signal().
3154
3155 Sat Mar 20 15:35:17 2004  Ben Pfaff  <blp@gnu.org>
3156
3157         * expr-evl.c: (expr_evaluate) Assert that `c' is nonzero before
3158         using it.
3159
3160 Sat Mar 20 15:18:16 2004  Ben Pfaff  <blp@gnu.org>
3161
3162         Changed DFM from open-at-first-access to explicit-open.  Before,
3163         calling dfm_get_record() or dfm_put_record() would automatically
3164         open the file.  Now, you have to call dfm_open_for_reading() or
3165         dfm_open_for_writing() explicitly.  This makes it possible to
3166         check permissions, file existence, etc. earlier.
3167
3168         Also made struct file_handle more opaque, and clean up in general.
3169
3170         * data-list.c: (cmd_data_list) Open handle for reading.
3171
3172         * dfm.c: (struct dfm_fhuser_ext) Add `where', `saw_begin_data'
3173         members.
3174         (open_file_r) Renamed dfm_open_for_reading(), rewrote.
3175         (open_file_w) Renamed dfm_open_for_writing(), rewrote.
3176         (open_inline_file) Removed.
3177         (read_record) For inline_file, if we haven't seen BEGIN DATA, read
3178         it.  Deal with line_number in extension record instead of file
3179         handle.
3180         (dfm_get_record) Rewrote.
3181         (dfm_put_record) Rewrote.
3182         (dfm_push) Assert file is open and one of ours.  Deal with
3183         line_number in extension record instead of file handle.
3184         (dfm_pop) Assert file is open and one of ours.  Deal with
3185         line_number in extension record instead of file handle.
3186         (cmd_begin_data) Use dfm_open_for_reading().  Mark that we saw
3187         BEGIN DATA.     
3188
3189         * file-handle.h: (enum constants RH_RF_*) Removed.
3190         (enum constants FH_MD_*) Removed.
3191         (struct file_handle) Removed `name', `norm_fn', `fn', `where',
3192         `recform', `lrecl', `mode' members.  Public references to
3193         `recform' changed to use handle_get_mode(), references to `lrecl'
3194         changed to use handle_get_record_width().  Added `private' member.
3195         (enum file_handle_mode) New.
3196
3197         * file-handle.q: (struct private_file_handle) New structure.
3198         (struct file_handle_list) New structure.
3199         (static var files) New.
3200         (static var file_handles) Removed.
3201         (init_file_handle) Removed.
3202         (create_file_handle) Removed.
3203         (get_handle_with_name) New function.
3204         (get_handle_for_filename) New function.
3205         (cmd_file_handle) Rewritten.
3206         (hash_file_handle) Removed.
3207         (cmp_file_handle) Removed.
3208         (fh_init_files) Rewritten.
3209         (fh_parse_file_handle) Rewritten.  Allows identifiers as
3210         filenames.
3211         (fh_get_handle_by_name) Renamed handle_get_name(), all references
3212         updated.  Rewritten.
3213         (fh_get_handle_by_filename) Renamed handle_get_filename(), all
3214         references updated.  Rewritten.
3215         (fh_record_width) Renamed handle_get_record_width(), all
3216         references updated.  Rewritten.
3217         (handle_get_mode) New function.
3218
3219         * file-type.c: (cmd_file_type) Open handle for reading.
3220
3221         * filename.c: [unix] (struct file_identity) New structure.
3222         [unix] (fn_get_identity) New function.
3223         [unix] (fn_free_identity) New function.
3224         [unix] (fn_compare_file_identities) New function.
3225         [!unix] (struct file_identity) New structure.
3226         [!unix] (fn_get_identity) New function.
3227         [!unix] (fn_free_identity) New function.
3228         [!unix] (fn_compare_file_identities) New function.
3229
3230         * lexer.c: (static var put) Renamed put_token, all references
3231         updated.
3232         (static var put_tokstr) New.
3233         (static var put_tokval) New.
3234         (lex_init) Initialize put_tokstr().
3235         (restore_token) New function.
3236         (save_token) New function.
3237         (lex_get) Use restore_token().
3238         (lex_put_back) Use save_token().
3239         (lex_put_back_id) New function.
3240         (lex_put_forward) Removed.
3241         (lex_preprocess_line) Set put_token instead of using
3242         lex_put_forward().
3243         (lex_negative_to_dash) Use save_token(), set put_token directly.
3244         (dump_token) Use stderr instead of stdout.
3245
3246         * main.c: (main) Remove call to cmd_init().
3247         
3248         * matrix-data.c: (cmd_matrix_data) Open file for reading.
3249
3250         * pfm-read.c: Use handle_get_filename() instead of trying to use
3251         h->fn directly, all over.
3252
3253         * pfm-write.c: Ditto.
3254
3255         * print.c: (internal_cmd_print) Open handle for writing.
3256         (dump_table) Use handle_get_filename().
3257         (print_trns_proc) Use handle_get_mode().
3258         (cmd_print_space) Use fh_parse_file_handle().
3259         Open handle for writing.
3260         [0] (debug_print) Removed.
3261
3262         * sfm-read.c: Use handle_get_filename() instead of trying to use
3263         h->fn directly, all over.
3264
3265         * sfm-write.c: Ditto.
3266
3267 Sat Mar 20 14:35:48 2004  Ben Pfaff  <blp@gnu.org>
3268
3269         Fix memory leaks.
3270         
3271         * autorecode.c: (arc_free) Free arc->src_values.
3272
3273         * error.c: (msg) Free buf.
3274
3275         * val-labs.c: (do_value_labels) Always free vars.
3276
3277         * vfm.c: (close_active_file) If sink has no make_source then call
3278         its destroy function.
3279
3280 Sat Mar 20 14:00:24 2004  Ben Pfaff  <blp@gnu.org>
3281
3282         Fixed cmd_parse() so that it always skips past a full command
3283         name.  A few special commands for which this would be bad get
3284         special treatment.  This lets us drop code for skipping past the
3285         end of a command name in most cmd_*() functions.  It's not worth
3286         listing all the commands affected.
3287
3288         * command.c: (struct command) Remove `cmd' member, replace by
3289         `name' member, all references updated.  Remove `word', `next',
3290         `skip_entire_name' members.
3291         (macro DEFCMD) Deal with revised `struct command'.
3292         (macro UNIMPL) Ditto.
3293         (macro SPCCMD) New macro for commands whose last word shouldn't be
3294         skipped.
3295         (static array cmd_table[]) Make const, rename `commands', remove
3296         sentinel element.
3297         (macro COMMAND_CNT) New macro.
3298         (split_words) Removed.
3299         (cmd_init) Removed.
3300         (FILE_TYPE_okay) Make parameter const.
3301         (cmd_parse) Improve error messages.
3302         (match_strings) New function.
3303         (next_word) New function.
3304         (enum command_match) New enum.
3305         (conflicting_3char_prefixes) New function.
3306         (conflicting_3char_prefix_command) New function.
3307         (cmd_match_words) New function.
3308         (count_matching_commands) New function.
3309         (get_command_name) New function.
3310         (free_words) New function.
3311         (unknown_command_error) New function.
3312         (figure_out_command) Renamed parse_command_name(), rewritten.
3313
3314         * command.def: Removed @ command.  Marked BEGIN DATA, DOCUMENT,
3315         FILE LABEL, REMARK, SUBTITLE, TITLE as special.  Renamed EVALUATE
3316         to DEBUG EVALUATE.  Added N alias for N OF CASES, SORT alias for
3317         SORT CASES.
3318
3319         * command.h: (macro SPCCMD) New.
3320
3321         * include.c: (cmd_include_at) Removed.
3322         (cmd_include) Allow identifier to be used as filename.
3323
3324         * inpt-pgm.c: (cmd_reread) Use fh_parse_file_handle().
3325
3326         * t-test.q: (cmd_t_test) Command name is now parsed for us.
3327         
3328
3329 Sat Mar 20 13:56:00 2004  Ben Pfaff  <blp@gnu.org>
3330
3331         Start work on better test framework.
3332         
3333         * Makefile.am: (pspp_sources) Add debug.c.
3334         
3335         * debug.c: New file.
3336
3337         * compute.c: (cmd_evaluate) Moved to debug.c, renamed
3338         cmd_debug_evaluate().
3339
3340         * expr-prs.c: (expr_parse) Remove PXP_DUMP support.
3341
3342         * expr.h: (enum constant PXP_DUMP) Removed.
3343
3344 Sat Mar 20 00:05:42 WST 2004 John Darrington <john@darrington.wattle.id.au>
3345
3346         * set.q:  Implemented the SHOW command, and synced it to the existing 
3347         SET cmd.
3348
3349         Added a handler for SIGWINCH so that viewlength and viewwidth follow
3350         changes as the window size is changed.
3351
3352         Added fallback to set viewlength and viewwidth from LINES and COLUMS
3353         environment variables if other methods are not available.
3354
3355         glob.c: Removed a lot of global variables from glob.c and encapsulated 
3356         them in set.q
3357
3358         random.c: Tidied up the way the random seed is set.
3359
3360         str.c: Added a ds_vprintf function.
3361
3362         error.c: Extended dump_message so that messages are always broken at
3363         '\n' characters.
3364         
3365 Thu Mar 18 11:07:14 2004  Ben Pfaff  <blp@gnu.org>
3366
3367         * pfm-write.c: (bufwrite) Write out the correct element for string
3368         variables.  From Andreas Streichardt <streichardt@globalpark.de>.
3369
3370 Mon Mar 15 20:48:03 2004  Ben Pfaff  <blp@gnu.org>
3371
3372         Get rid of static and global (!) vars in matrix-data.c.
3373
3374         * matrix-data.c: (static var nr_data) Removed.
3375         (static var nr_factor_values) Removed.
3376         (static var max_cell_index) Removed.
3377         (static var split_values) Removed.
3378         (struct nr_aux_data) New structure.
3379         (read_matrices_without_rowtype) Use a local struct nr_aux_data in
3380         place of static vars, pass to create_case_source() and procedure()
3381         as aux data.
3382         (nr_read_data_lines) Use struct nr_aux_data * parameter instead of
3383         struct matrix_data_pgm *.
3384         (nr_read_splits) Ditto.
3385         (nr_read_factors) Ditto.
3386         (nr_output_data) Ditto.
3387         (static var wr_content) Removed.
3388         (global var wr_data) Removed.
3389         (global var wr_current) Removed.
3390         (struct wr_aux_data) New structure.
3391         (read_matrices_with_rowtype) Use a local struct wr_aux_data in
3392         place of static vars, pass to create_case_source() and procedure()
3393         as aux data.
3394         (matrix_data_read_with_rowtype) Use struct wr_aux_data * parameter
3395         instead of matrix_data_pgm *.
3396         (wr_read_splits) Ditto.
3397         (wr_output_data) Ditto.
3398         (wr_read_rowtype) Ditto.
3399         (wr_read_factors) Ditto.
3400         (wr_read_indeps) Ditto.
3401         
3402 Mon Mar 15 20:07:29 2004  Ben Pfaff  <blp@gnu.org>
3403
3404         Get rid of static vars in autorecode.c.
3405
3406         * autorecode.c: (struct autorecode_trns) Rename `arc' to `specs',
3407         `n_arc' to `spec_cnt'.  All references updated.
3408         (static var v_src) Removed.
3409         (static var v_dest) Removed.
3410         (static var h_trns) Removed.
3411         (static var nv_src) Removed.
3412         (static var descend) Removed.
3413         (static var print) Removed.
3414         (enum direction) New enum.
3415         (struct autorecode_pgm) New structure.
3416         (cmd_autorecode) Use struct autorecode_pgm instead of static vars.
3417         Move n_dest local var into struct autorecode_pgm for ease of
3418         clean-up.  Use arc_free().
3419         (arc_free) New function.
3420         (recode) Modify to take struct autorecode_pgm * parameter instead
3421         of using statics.  Let the caller clean up.
3422         (autorecode_proc_func) Use struct autorecode_pgm * auxiliary data
3423         instead of statics.  Rearrange code a little.
3424
3425 Mon Mar 15 00:25:02 2004  Ben Pfaff  <blp@gnu.org>
3426
3427         Get rid of static, global vars in recode.c.  Remove debug code.
3428
3429         * recode.c: (static var head) Removed.
3430         (global var v) Removed.
3431         (global var nv) Removed.
3432         (cmd_recode) New local variables head, v, nv.  Initialize and free
3433         v.  Don't call debug_print().
3434         [DEBUGGING] (dump_dest) Removed.
3435         [DEBUGGING] (debug_print) Removed.
3436
3437 Mon Mar 15 00:14:49 2004  Ben Pfaff  <blp@gnu.org>
3438
3439         Get rid of static vars in expr-opt.c.
3440
3441         * expr-opt.c: (static var e) Removed.
3442         (static var nop) Removed.
3443         (static var mop) Removed.
3444         (static var ndbl) Removed.
3445         (static var mdbl) Removed.
3446         (static var nstr) Removed.
3447         (static var mstr) Removed.
3448         (static var nvars) Removed.
3449         (static var mvars) Removed.
3450         (struct expr_dump_state) New structure.
3451         (dump_expression) Use new struct expr_dump_state instead of static
3452         vars and pass to functions we call.
3453         (dump_node) Use struct expr_dump_state * parameter.
3454         (emit) Ditto.
3455         (emit_num_con) Ditto.
3456         (emit_str_con) Ditto.
3457         (emit_var) Ditto.
3458         
3459 Mon Mar 15 00:03:51 2004  Ben Pfaff  <blp@gnu.org>
3460
3461         Get rid of static var in COUNT.
3462
3463         * count.c: (static var head) Move into cmd_count().
3464         (cmd_count) [DEBUGGING] Don't call debug_print.
3465         [DEBUGGING] (debug_print) Removed.
3466
3467 Sun Mar 14 23:56:09 2004  Ben Pfaff  <blp@gnu.org>
3468
3469         Get rid of static vars in VALUE LABELS, ADD VALUE LABELS.
3470
3471         * val-labs.c: (static var v) Removed.
3472         (static var nv) Removed.
3473         [DEBUGGING] (debug_print) Removed.
3474         (verify_val_labs) Add struct variable **, int parameters.
3475         (get_label) Ditto.  Improve error messages, streamline.
3476         (erase_labels) New function for erasing value labels, taking over
3477         part of verify_val_labs()'s function.
3478         (init) Removed.
3479         (done) Removed.
3480         (cmd_value_labels) No need to call init() or done() anymore.
3481         (cmd_add_value_labels) Ditto.
3482         (do_value_labels) Add vars, var_cnt local variables.  Clean up
3483         after them internally.  Call erase_labels() if we should.  Don't
3484         call debug_print().
3485
3486 Sun Mar 14 23:33:53 2004  Ben Pfaff  <blp@gnu.org>
3487
3488         Get rid of static vars in MATCH FILES.
3489         
3490         * get.c: (static var mtf_head) Removed.
3491         (static var mtf_tail) Removed.
3492         (static var mtf_by) Removed.
3493         (static var mtf_n_by) Removed.
3494         (static var mtf_master) Removed.
3495         (static var mtf_seq_num) Removed.
3496         (static var mtf_seq_nums) Removed.
3497         (static var mtf_sink) Removed.
3498         (static var mtf_case) Removed.
3499         (struct mtf_proc) New structure.
3500         (cmd_match_files) Use struct mtf_proc instead of static vars.
3501         (mtf_processing_finish) Ditto.
3502         (mtf_free) Ditto.
3503         (mtf_delete_file_in_place) Ditto.
3504         (mtf_read_nonactive_records) Ditto.
3505         (mtf_compare_BY_values) Ditto.
3506         (mtf_processing) Ditto.
3507         (mtf_merge_dictionary) Ditto.
3508
3509 Sun Mar 14 22:48:12 2004  Ben Pfaff  <blp@gnu.org>
3510
3511         * command.def: Add CASESTOVARS, VARSTOCASES unimplemented commands.
3512
3513         * dictionary.c: (dict_rename_var) Add assertion.
3514         (dict_contains_var) Check by index instead of name.
3515
3516 Sun Mar 14 22:01:02 2004  Ben Pfaff  <blp@gnu.org>
3517
3518         Get rid of compaction_necessary, compaction_nval, compaction_case.
3519         Redo VFM interface.  Replace disk_sink and memory_sink by
3520         storage_sink, disk_source and memory_source by storage_source.
3521
3522         * vfm.h: (struct case_sink) Add `dict', `idx_to_fv', `value_cnt'
3523         members.
3524
3525         * vfm.c: 
3526         (struct write_case_data) Remove `begin_func', `end_func',
3527         `func_aux' members.  Add `aux', `trns_case', `sink_case',
3528         `cases_written', `cases_analyzed' members.
3529         (global var compaction_necessary) Make static.
3530         (global var compaction_nval) Removed.
3531         (global var compaction_case) Removed.
3532         (static var case_count) Removed.
3533         (struct procedure_aux_data) Removed.
3534         (struct split_aux_data) Removed.
3535         (procedure) Remove begin_func, end_func parameters.  Rewrite.
3536         (static var not_canceled) Removed.
3537         (process_active_file) Removed.
3538         (process_active_file_write_case) Removed.
3539         (process_active_file_output_case) Removed.
3540         (prepare_for_writing) Moved into open_active_file().
3541         (arrange_compaction) Ditto.
3542         (setup_lag) Ditto.
3543         (open_active_file) Rewrote.
3544         (write_case) New function.
3545         [DEBUGGING] (index_to_varname) Removed.
3546         (execute_transformations) New function.
3547         (exclude_this_case) Renamed filter_case(), changed interface.
3548         (clear_case) Added struct ccase * parameter to interface.
3549         (close_active_file) Added struct write_case_data * parameter,
3550         rewrote.
3551         (disk_sink_create) Removed.
3552         (disk_sink_destroy) Removed.
3553         (disk_sink_make_source) Removed.
3554         (disk_sink_write) Removed.
3555         (disk_source_count) Removed.
3556         (disk_source_destroy) Removed.
3557         (disk_source_read) Removed.
3558         (global var disk_sink_class) Removed.
3559         (global var disk_source_class) Removed.
3560         (global var memory_sink_class) Removed.
3561         (global var memory_source_class) Removed.
3562         (memory_sink_create) Removed.
3563         (memory_sink_destroy) Removed.
3564         (memory_sink_make_source) Removed.
3565         (memory_sink_write) Removed.
3566         (memory_source_count) Removed.
3567         (memory_source_destroy) Removed.
3568         (memory_source_get_cases) Removed.
3569         (memory_source_read) Removed.
3570         (memory_source_set_cases) Removed.
3571         (struct disk_stream_info) Removed.
3572         (struct memory_sink_info) Removed.
3573         (struct memory_source_info) Removed.
3574         (write_active_file_to_disk) Removed.
3575         (destroy_storage_stream_info) New function.
3576         (global var null_sink_class) New var.
3577         (global var storage_sink_class) New var.
3578         (global var storage_source_class) New var.
3579         (open_storage_file) New function.
3580         (storage_sink_destroy) New function.
3581         (storage_sink_make_source) New function.
3582         (storage_sink_open) New function.
3583         (storage_sink_write) New function.
3584         (storage_source_count) New function.
3585         (storage_source_destroy) New function.
3586         (storage_source_get_cases) New function.
3587         (storage_source_on_disk) New function.
3588         (storage_source_read) New function.
3589         (storage_source_set_cases) New function.
3590         (storage_source_to_disk) New function.
3591         (storage_to_disk) New function.
3592         (struct storage_stream_info) New structure.
3593         (write_storage_file) New function.
3594         (procedure_write_case) Removed.
3595         (create_case_source) Add `struct dictionary *' parameter, all
3596         references updated.
3597         (create_case_sink) Ditto.
3598         (free_case_sink) New function.
3599         (struct split_aux_data) New structure.
3600         (procedure_with_splits) New function implementing what procedure()
3601         used to.
3602         (SPLIT_FILE_proc_func) Removed.
3603         (procedure_with_splits_callback) New function.
3604         (equal_splits) New function.
3605         
3606         * aggregate.c: Pass around a struct instead of using statics.
3607         (static var outfile) Remove.
3608         (enum type) Give it tag `missing_treatment'.
3609         (static var missing) Remove.
3610         (static var sort) Remove.
3611         (static var agr_first) Remove.
3612         (static var agr_next) Remove.
3613         (static var case_count) Remove.
3614         (static var prev_case) Remove.
3615         (static var buf64_1xx) Remove.
3616         (static var buf_1xx) Remove.
3617         (struct agr_proc) New structure incorporating the above.
3618         (cmd_aggregate) Use new struct.  Clean up error handling using
3619         agr_destroy().  Completely rewrite actual implementation of
3620         aggregation.
3621         (create_sysfile) Add struct agr_proc * parameter, modify
3622         accordingly.
3623         (parse_aggregate_functions) Ditto.
3624         (free_aggregate_functions) Ditto.  Rename agr_destroy().
3625         (aggregate_single_case) Add struct agr_proc * parameter, modify
3626         accordingly.
3627         (accumulate_aggregate_info) Ditto.
3628         (dump_aggregate_info) Ditto.
3629         (initialize_aggregate_info) Ditto.
3630         (agr_00x_trns_proc) Removed.
3631         (agr_00x_end_func) Removed.
3632         (agr_10x_trns_proc) Removed.
3633         (agr_10x_trns_free) Removed.
3634         (agr_10x_end_func) Removed.
3635         (agr_11x_read) Removed.
3636         (agr_11x_finish) Removed.
3637         [DEBUGGING] (debug_print) Removed.
3638         (write_case_to_sfm) Add struct agr_proc * parameter, modify
3639         accordingly.
3640         (agr_to_active_file) New function.
3641         (presorted_agr_to_sysfile) New function.
3642         (sort_agr_to_sysfile) New function.
3643
3644         * autorecode.c: (cmd_autorecode) Use procedure_with_splits().
3645
3646         * crosstabs.q: (internal_cmd_crosstabs) Ditto.
3647
3648         * descript.q: (cmd_descriptives) Ditto.
3649
3650         * dfm.c: (cmd_begin_data) Check for storage_source_class.  Adapt
3651         to new procedure() interface.
3652
3653         * command.c: (cmd_execute) Adapt to new procedure() interface.
3654
3655         * dictionary.c: (dict_compact_values) Also delete scratch
3656         variables.
3657         (dict_get_compacted_value_cnt) New function.
3658         (dict_get_compacted_idx_to_fv) New function.
3659
3660         * flip.c: (cmd_flip) Warn about and cancel TEMPORARY.
3661         (cmd_flip) Adapt to new procedure() interface.
3662         (flip_sink_write) Use sink->idx_to_fv.
3663
3664         * frequencies.q: (internal_cmd_frequencies) Use
3665         procedure_with_splits().
3666
3667         * get.c: (cmd_save_internal) Adapt to new procedure() interface.
3668         (static var mtf_sink) New static var.
3669         (static var mtf_case) New static var.
3670         (cmd_match_files) Warn about and cancel TEMPORARY.  Redo the way
3671         we actually implement the matching.
3672         (mtf_delete_file_in_place) Use mtf_case.
3673         (mtf_processing) Use mtf_case and mtf_sink.
3674         (cmd_export) Adapt to new procedure() interface.
3675
3676         * levene.c: (levene) Use procedure_with_splits().
3677
3678         * list.q: (cmd_list) Use procedure_with_splits().
3679
3680         * matrix-data.c: (read_matrices_without_rowtype) Adapt to new
3681         procedure() interface.
3682         (read_matrices_with_rowtype) Ditto.
3683
3684         * modify-vars.c; (cmd_modify_vars) Warn about and cancel
3685         TEMPORARY.  Adapt to new procedure() interface.
3686
3687         * rename-vars.c: Warn about and cancel TEMPORARY.
3688
3689         * sort.c: (cmd_sort_cases) Warn about TEMPORARY.
3690         (sort_cases) Use dict_get_compacted_value_cnt() instead of
3691         compaction_nval.  Adapt to new procedure() interface.  Use
3692         storage_source_to_disk().
3693         (do_internal_sort) Don't try to dump the cases to memory.
3694         (compare_case_lists) Pass null idx_to_fv.
3695         (struct initial_run_state) Add `idx_to_fv' member.  Remove
3696         `case_size' member.
3697         (write_initial_runs) Don't initialize irs->case_size.  Adapt to
3698         new procedure() interface.  Reset irs->idx_to_fv after calling
3699         procedure().
3700         (sort_sink_write) Set irs->idx_to_fv.  Use case_size from struct
3701         sort_cases_pgm.  Pass irs, not struct sort_cases_pgm to
3702         push_heap().
3703         (destroy_initial_run_state) Don't dereference irs after freeing
3704         it.
3705         (allocate_cases) Don't calculate case_size locally.
3706         (compare_record) Add idx_to_fv parameter.
3707         (compare_record_run) Change parameter from struct sort_cases_pgm *
3708         to struct initial_run_state *.  Pass irs->idx_to_fv to
3709         compare_record().
3710         (compare_record_run) Third parameter now a struct
3711         initial_run_state *.
3712         (output_record) No need for out_case anymore.  Pass irs, not
3713         struct sort_cases_pgm to pop_heap().  Use case_size from struct
3714         sort_cases_pgm.
3715         (merge) Use case_size from struct sort_cases_pgm.
3716         (merge_once) Use case_size from struct sort_cases_pgm.
3717         Pass null pointer to compare_record() as idx_to_fv.
3718         (global var sort_sink_class) Make static.
3719
3720         * t-test.q: (cmd_t_test) Use procedure_with_splits().
3721
3722         * temporary.c: Remove debugging crap.
3723
3724 Sat Mar 13 14:19:52 WST 2004 John Darrington <john@darrington.wattle.id.au>
3725
3726         * t-test.q, levene.c: Fixed up the handling of MISSING values
3727         int the T-TEST
3728
3729 Fri Mar 12 16:23:35 WST 2004 John Darrington <john@darrington.wattle.id.au>
3730
3731         * t-test.q, levene.c: Added support for T-TEST /GROUP where only 
3732         one value is given.
3733
3734 Wed Mar 10 23:25:13 2004  Ben Pfaff  <blp@gnu.org>
3735
3736         Change explicit variable name checks into use of
3737         dict_class_from_id().
3738
3739         * dictionary.c: (dict_create_var)  Change explicit variable name
3740         check into use of dict_class_from_id().
3741
3742         * get.c: (trim_dictionary) Ditto.
3743
3744         * sel-if.c: (cmd_filter) Ditto.
3745
3746         * sysfile-info.c: (cmd_display) Ditto.
3747
3748         * vars-prs.c: (parse_DATA_LIST_vars) Ditto.
3749
3750         * vfm.c: (arrange_compaction) Ditto.
3751
3752         * weight.c: (cmd_weight) Ditto.
3753
3754 Wed Mar 10 21:16:34 2004  Ben Pfaff  <blp@gnu.org>
3755
3756         * temporary.c: (cmd_temporary) When TEMPORARY was the first
3757         transformation following the input program, if any, for some
3758         reason we special-cased f_trns.  That's just wrong.  It should
3759         always be set to n_trns.
3760
3761 Tue Mar  9 23:44:40 2004  Ben Pfaff  <blp@gnu.org>
3762
3763         * format.c: (parse_format_specifier_name) Fix brown-bag bug
3764         introduced in last check-in.
3765
3766 Tue Mar  9 23:10:41 2004  Ben Pfaff  <blp@gnu.org>
3767
3768         * format.c: (global array translate_fmt[]) Removed.
3769         (translate_fmt) New function as replacement.
3770         (parse_format_specifier_name) Rewrite.
3771
3772         * pfm-read.c: (convert_format) Use translate_fmt() instead of
3773         translate_fmt[].
3774
3775         * sfm-read.c: (parse_format_spec) Ditto.
3776
3777         * postscript.c: (text) Fix handling of fonts with missing
3778         ligatures.
3779
3780         * sort.c: (struct external_sort) Add temp_name member.
3781         (destroy_external_sort) Free temp_dir, temp_name members.
3782         (init_external_sort) Allocate temp_name.
3783         (get_temp_file_name) Change prototype.
3784         (open_temp_file) Deal with change to get_temp_file_name().
3785         (close_temp_file) Ditto.
3786         (remove_temp_file) Ditto.
3787         (write_temp_file) Ditto.
3788         (read_temp_file) Ditto.
3789         (sort_sink_destroy) Removed.
3790         (sort_sink_class) Change destroy member to null.
3791
3792 Tue Mar  9 22:36:34 2004  Ben Pfaff  <blp@gnu.org>
3793
3794         Eliminate temp_case.
3795
3796         * aggregate.c: (cmd_aggregate) No need to save/restore temp_case
3797         anymore.  Use agr_11x_finish().
3798         (aggregate_single_case) Make first param const.
3799         (accumulate_aggregate_info) Ditto.
3800         (agr_00x_end_func) Use compaction_case, not temp_case.
3801         (agr_11x_func) Break into agr_11x_read(), agr_11x_finish().
3802
3803         * data-list.c: (struct data_list_pgm) Add `case_size' member.
3804         (cmd_data_list) Initialize case_size.
3805         (read_from_data_list_fixed) Add struct ccase * param, use instead
3806         of temp_case.
3807         (read_from_data_list_free) Ditto.
3808         (read_from_data_list_list) Ditto.
3809         (read_one_case) Rename data_list_trns_proc(), all references
3810         updated.  Add argument in calling above functions.  Use c
3811         argument instead of temp_case.
3812         (destroy_dls) Rename data_list_trns_free(), all references
3813         updated.
3814
3815         * expr-evl.c: (expr_evaluate) Make second parameter const.
3816
3817         * file-type.c: (struct file_type_pgm) Add `case_size' member.
3818         (cmd_end_file_type) Initialize `case_size'.
3819         (file_type_source_read) Add struct ccase * parameter.  Use instead
3820         of temp_case.
3821
3822         * flip.c: Rewritten.
3823
3824         * get.c: (struct get_pgm) New structure to keep track of
3825         case_size.
3826         (cmd_get) Initialize case_size.
3827         (cmd_import) Ditto.
3828         (get_source) Deal with struct get_pgm.
3829         (get_source_read) Add struct ccase * parameter, use instead of
3830         temp_case.
3831         (import_source_read) Ditto.
3832
3833         * get.c: Use a null pointer instead of temp_case to represent the
3834         "current case" in a struct mtf_file's input member.
3835         (mtf_processing_finish) Pass null to mtf_processing(), not
3836         temp_case.
3837         (mtf_read_nonactive_records) Don't set iter->input to temp_case.
3838         (mtf_compare_BY_values) Add extra arg, use instead of null input
3839         members.
3840         (mtf_processing) Use c parameter instead of temp_case.  Pass
3841         compaction_case to process_active_file_output_case().
3842         
3843         * glob.c: (global variable temp_case) Removed.
3844
3845         * inpt-pgm.c: (struct input_program_pgm) Add `case_size' member.
3846         (cmd_input_program) Initialize case_size.  Set
3847         vfm_source->value_cnt.
3848         (init_case) Add struct ccase * parameter, use instead of
3849         temp_case.
3850         (clear_case) Ditto.
3851         (input_program_source_read) Ditto.
3852
3853         * matrix-data.c: (matrix_data_read_without_rowtype) Ditto.
3854         (dump_cell_content) Ditto.
3855         (nr_output_data) Ditto.
3856         (read_matrices_without_rowtype) Ditto.
3857         (matrix_data_read_with_rowtype) Ditto.
3858         (wr_read_splits) Ditto.
3859         (wr_output_data) Ditto.
3860
3861         * sort.h: (struct sort_cases_pgm) New member `case_size'.
3862         
3863         * sort.c: (sort_cases) Initialize scp->case_size.
3864         (struct external_sort) Remove `case_size' member.
3865         (write_initial_runs) Only call vfm_sink->class_destroy if
3866         non-null.
3867         (struct sort_source_aux) New structure.
3868         (sort_source_read_helper) New function.
3869         (sort_source_read) Use sort_source_read_helper().
3870         (read_sort_output) Change interface to be more reasonable.
3871         (read_internal_sort_output) Ditto.
3872         (read_external_sort_output) Ditto.
3873
3874         * vars-prs.c: (dict_class_to_name) Pass return value through
3875         gettext.
3876
3877         * vfm.c: (struct procedure_aux_data) Add `trns_case' member.
3878         (procedure) Initialize trns_case.
3879         (procedure) Pass trns_case to vfm_source->class->read().
3880         Free trns_case.
3881         (process_active_file) Start using struct procedure_aux_data.
3882         (process_active_file_write_case) Pass trns_case to
3883         transformations, lag_case(), clear_case().
3884         (process_active_file_output_case) Add struct ccase * parameter.
3885         (create_trns_case) New function.
3886         (make_temp_case) Removed.
3887         (vector_initialization) Removed.
3888         (close_active_file) Only call make_source if non-null, otherwise
3889         set vfm_source to null pointer.  Don't free temp_case.
3890         (disk_source_read) Add struct ccase * parameter, use instead of
3891         temp_case.
3892         (memory_source_read) Ditto.
3893         (lag_case) Add const struct ccase * member.
3894         (procedure_write_case) Use trns_case instead of temp_case.
3895         (clear_case) Add struct ccase * member, use instead of temp_case.
3896         (exclude_this_case) Ditto.
3897         (create_case_source) Add struct dictionary * parameter, use to
3898         initialize source->value_cnt.
3899
3900         * vfm.h: (struct case_source) Add `value_cnt' member.
3901         (struct case_source_class) Add struct ccase * parameter to `read'
3902         member function pointer.
3903         (struct case_sink_class) Make struct ccase * parameter const in
3904         `write' member function pointer.
3905         
3906 Wed Mar  3 20:44:37 2004  Ben Pfaff  <blp@gnu.org>
3907
3908         Fix a lot of "possibly uninitialized variable" warnings.  Some of
3909         them are even real bugs.  A few of them make me wonder how the
3910         code ever worked.
3911
3912         * aggregate.c: (parse_aggregate_functions) Initialize `function.
3913
3914         * ascii.c: (output_lines) Add default case to switch.
3915
3916         * crosstabs.q: Remove static variable `expected' and all
3917         references to it.
3918         (display_crosstabulation) Always calculate expected value.
3919         (calc_chisq) Ditto.
3920         (output_pivot_table) Initialize `cmp'.
3921         (display_crosstabulation) New variable `last_row', which is
3922         initialized.
3923
3924         * data-in.c: (parse_numeric) Always initialize sign.  How did this
3925         work at all?!
3926
3927         * data-list.c: (repeating_data_trns_proc) Always initialize code.
3928         Always set info.ofs.  (How did this work?!)
3929
3930         * expr-opt.c: (optimize_tree) Always initialize `m'.
3931         (evaluate_tree) Always initialize `c'.  (How did this work?)
3932
3933         * frequencies.q: (frq_custom_variables) Always initialize min,
3934         max.
3935         (frq_custom_grouped) Always initialize `dl'.
3936
3937         * groff-font.c: (groff_read_font) Always initialize char_set.
3938
3939         * matrix-data.c: (nr_output_data) Initialize `split'.
3940         (wr_read_splits) Remove shadowing split_cnt declaration.
3941         (wr_output_data) Initialize `split'.
3942
3943         * output.c: (tokener) Skip add character on syntax error.
3944
3945         * pool.c: (pool_strndup) Always set `copy'.  (How did this work?!)
3946
3947         * postscript.c: (read_ps_encodings) Use line.string instead of
3948         uninitialized `bp'.
3949         (write_text) Add default case to switch.
3950         (text) Always initialize multiple variables.  Fix bug with
3951         ligatures.
3952
3953         * print.c: (fixed_parse_fortran) Initialize head.
3954         (alloc_line) Add default case to switch.
3955
3956         * recode.c: (parse_dest_spec) Handle case where nothing matches.
3957         (recode_trns_proc) Move variable declaration inward.  Add default
3958         case to switch.
3959
3960         * sfm-read.c: (read_header) Initialize skip_amt.
3961
3962         * sysfile-info.c: (display_variables) Always initialize pc.
3963
3964         * vars-prs.c: Initialized `included'.
3965
3966 Wed Mar  3 09:30:09 2004  Ben Pfaff  <blp@gnu.org>
3967
3968         * main.c: (main) sigaction()'s sa_flags member was uninitialized.
3969         Just use signal() instead.
3970
3971 Wed Mar  3 09:26:30 2004  Ben Pfaff  <blp@gnu.org>
3972
3973         Get rid of vfm_sink_info and vfm_source_info.
3974         
3975         * aggregate.c: (agr_00x_end_func) Don't increment
3976         sfm_sink_info.ncases.
3977
3978         * sort.c: (do_internal_sort) Get case count from
3979         vfm_source->class->count().
3980         (struct external_sort) Add `case_size' member.
3981         (do_external_sort) Initialize case_size.
3982         (struct initial_run_state) Add `case_size' member.
3983         (write_initial_runs) Initialize case_size.
3984         (sort_sink_write) Use case_size.
3985         (read_external_sort_output) Use case_size.  Get case_cnt from
3986         initial_runs.
3987
3988         * vfm.c: (struct write_case_data) Add underscores to existing arg
3989         names, all references updated.  Renamed `aux' as `func_aux', all
3990         references updated.  Added new `aux' member.
3991         (global var vfm_source_info) Removed.
3992         (global var vfm_sink_info) Removed.
3993         (struct procedure_aux_data) New.
3994         (struct split_aux_data) New.
3995         (procedure) Use `aux' fields for procedure_aux_data,
3996         split_aux_data.
3997         (process_active_file_write_case) Pass case_count + 1 to
3998         transformation procedures, exclude_this_case().
3999         (process_active_file_output_case) Don't increment
4000         vfm_sink_info.ncases.
4001         (prepare_for_writing) Don't initialize vfm_sink_info.  Don't try
4002         to send data to disk early.
4003         (make_temp_case) Don't use vfm_sink_info.case_size.
4004         (close_active_file) Don't initialize vfm_source_info.
4005         (struct disk_stream_info) New, to allow for case_cnt and case_size fields.
4006         (disk_sink_create) Initialize and/or update disk_stream_info.
4007         (disk_sink_write) Ditto.
4008         (disk_sink_destroy) Ditto.
4009         (disk_sink_make_source) Ditto.
4010         (disk_source_read) Ditto.
4011         (disk_source_destroy) Ditto.
4012         (global var disk_source_class) Add disk_source_count().
4013         (disk_source_count) New function.
4014         (struct memory_sink_info) Add `case_cnt', `case_size' members.
4015         (struct memory_source_info) Ditto.
4016         (memory_sink_create) Deal with case_cnt, case_size.
4017         (memory_sink_write) Ditto.
4018         (memory_sink_make_source) Ditto.
4019         (memory_source_read) Ditto.
4020         (memory_source_count) New function.
4021         (memory_source_class) Add memory_source_count().
4022         (procedure_write_case) Don't use vfm_sink_info.ncases.  Do use
4023         proc_aux->cases_written, and pass it to transformation procedures
4024         and exclude_this_case ().
4025         (exclude_this_case) Add case_num parameter.  Pass it to
4026         expr_evaluate().
4027         (SPLIT_FILE_procfunc) Use split_aux->prev_case instead of static
4028         variable.
4029
4030         * vfm.h: (struct case_source_class) Add `count' member.
4031
4032         * vfmP.h: (struct stream_info) Removed.
4033         (global variable vfm_source_info) Removed.
4034         (global variable vfm_sink_info) Removed.
4035         
4036 Tue Mar  2 23:38:17 2004  Ben Pfaff  <blp@gnu.org>
4037
4038         * var.h: (typedef trns_proc_func) New typedef.
4039         (trns_free_func) New typedef.
4040         (struct trns_header) Change `proc' to type trns_proc_func, `free'
4041         to type trns_free_func.  This only changes the actual type of
4042         trns_proc_func, adding a `case_num' parameter.  Updated all
4043         implementations to use the typedefs instead.
4044
4045         * compute.c: (compute_num) Pass case_num to expr_evaluate().
4046         (compute_num_vec) Ditto.
4047         (compute_str) Ditto.
4048         (compute_str_vec) Ditto.
4049
4050         * do-if.c: (do_if_trns_proc) Ditto.
4051
4052         * expr-evl.c: (expr_evaluate) Add new case_num parameter, use for
4053         OP_CASENUM.
4054
4055         * inpt-pgm.c: (input_program_source_read) Maintain case count,
4056         pass to transformation functions.
4057         (reread_trns_proc) Pass case_num arg to expr_evaluate().
4058
4059         * loop.c: (loop_1_trns_proc) Ditto.
4060         (loop_2_trns_proc) Ditto.
4061         (loop_3_trns_proc) Ditto.
4062
4063         * print.c: (print_space_trns_proc) Ditto.
4064
4065         * sel-if.c: (select_if_proc) Ditto.
4066
4067 Tue Mar  2 11:36:52 2004  Ben Pfaff  <blp@gnu.org>
4068
4069         * frequencies.q: (cleanup_freq_tab) Avoid memory leak by
4070         destroying hash table.
4071
4072         * glob.c: (read_active_file) Variable not referenced, removed.
4073         (cancel_input_pgm) Ditto.
4074
4075         * levene.c: Add #include <stdlib.h> needed to call free().
4076
4077         * aggregate.c: (parse_aggregate_functions) Make `function'
4078         variable const.
4079
4080 Tue Mar  2 11:30:56 2004  Ben Pfaff  <blp@gnu.org>
4081
4082         Start working to eliminate VFM dependence on static variables.
4083
4084         * command.c: (cmd_parse) Use case_source_is_class().
4085
4086         * data-list.c: Rewrite to eliminate use of static variables.
4087
4088         * dfm.c: (cmd_begin_data) Use case_source_is_class().
4089
4090         * file-handle.q: (fh_handle_name) Make parameter const.
4091
4092         * file-type.c: Rewrite to eliminate use of static variables.
4093
4094         * flip.c: Rewrite to eliminate use of static variables.
4095
4096         * format.c: (get_format_var_width) New function.
4097
4098         * get.c: Eliminate use of static variables.
4099
4100         * inpt-pgm.c: Eliminate use of static variables.
4101
4102         * matrix-data.c: Eliminate use of static variables.
4103
4104         * set.q: (set_max_workspace) New variable.
4105         (cmd_set) Use SET WORKSPACE to modify set_max_workspace.
4106
4107         * var.h: (struct case_list) Move here from vfmP.h.
4108
4109         * vars-atr.c: (discard_variables) Handle new vfm_source type.
4110
4111         * vfm.c: (vfm_source) Change type from struct case_stream to
4112         struct case_source.
4113         (vfm_sink) Change type from struct case_stream to struct
4114         case_sink.
4115         (static var paging) Rename workspace_overflow, all references
4116         updated.
4117         (procedure) Use new class structures.
4118         (process_active_file) Ditto.
4119         (process_active_file_write_case) Ditto.
4120         (prepare_for_writing) Use set_max_workspace.  Use new class
4121         structures.
4122         (close_active_file) Use new class structures.  Free old sink.
4123         (global var disk_source_file) Removed.
4124         (global var disk_sink_file) Removed.
4125         (disk_stream_init) Removed.
4126         (disk_stream_read) Removed.
4127         (disk_stream_write) Removed.
4128         (disk_stream_mode) Removed.
4129         (disk_stream_destroy_source) Removed.
4130         (disk_stream_destroy_sink) Removed.
4131         (global var vfm_disk_stream) Removed.
4132         (disk_sink_create) New function.
4133         (disk_sink_write) New function.
4134         (disk_sink_destroy) New function.
4135         (disk_sink_make_source) New function.
4136         (disk_sink_class) New static var.
4137         (disk_source_read) New function.
4138         (disk_source_destroy) New function.
4139         (global var vfm_source_class) New var.
4140         (global var memory_source_cases) Removed.
4141         (global var memory_sink_cases) Removed.
4142         (global var memory_sink_max_cases) Removed.
4143         (struct memory_sink_info) New struct.
4144         (memory_stream_init) Removed.
4145         (memory_stream_read) Removed.
4146         (memory_stream_write) Removed.
4147         (memory_stream_mode) Removed.
4148         (memory_stream_destroy_source) Removed.
4149         (memory_stream_destroy_sink) Removed.
4150         (global var vfm_memory_stream) Removed.
4151         (page_to_disk) Renamed write_active_file_to_disk().
4152         (memory_sink_create) New function.
4153         (memory_sink_write) New function.
4154         (memory_sink_destroy) New function.
4155         (memory_sink_make_source) New function.
4156         (memory_sink_class) New static var.
4157         (memory_source_read) New function.
4158         (memory_source_destroy) New function.
4159         (memory_source_get_cases) New function.
4160         (memory_source_set_cases) New function.
4161         (global var vfm_source_class) New var.
4162         (procedure_write_case) Use new class structures.
4163         (create_case_source) New function.
4164         (case_source_is_complex) New function.
4165         (case_source_is_class) New function.
4166         (create_case_sink) New function.
4167
4168         * vfm.h: (global variable reinit_sysmis) Not used, removed.
4169         (global variable reinit_blanks) Not used, removed.
4170         (global variable init_zero) Not used, removed.
4171         (global variable init_blanks) Not used, removed.
4172         (struct case_source) New struct.
4173         (struct case_source_class) New struct.
4174         (struct case_sink) New struct.
4175         (struct case_sink_class) New struct.
4176         (struct case_stream) Removed.
4177
4178         * vfmP.h: (struct case_list) Moved to var.h.
4179
4180 Tue Mar  2 11:28:30 2004  Ben Pfaff  <blp@gnu.org>
4181
4182         * algorithm.c: (count_equal) New function.
4183         (count_if) New function.
4184         (unique) Add assertions.
4185         (partition) Add assertions.
4186         (is_partitioned) New function.
4187         (copy_if) Add assertions.
4188         (remove_equal) Add assertions.
4189         (lexicographical_compare) Rename lexicographical_compare_3way.
4190         (sort) Add assertions.  Rephrase some code.
4191         (is_sorted) New function.
4192
4193 Sun Feb 29 23:24:57 2004  Ben Pfaff  <blp@gnu.org>
4194
4195         Rewrite SORT CASES.
4196
4197         * sort.c: Completely rewrite.
4198
4199         * sort.h: Expose interface via struct sort_cases_pgm, not via
4200         global variables.
4201
4202         * aggregate.c: (sort) New static var.
4203         (cmd_aggregate) Use sort.
4204         (create_sysfile) Ditto.
4205         (aggregate_single_case) Ditto.
4206         (dump_aggregate_info) Ditto.
4207         (agr_00x_end_func) Ditto.
4208         (debug_print) Ditto.
4209
4210         * var.h: (enum SRT_ASCEND) Removed.
4211         (enum SRT_DESCEND) Removed.
4212         (struct sort_cases_proc) Removed.
4213         (struct variable) Remove p.srt member.
4214
4215 Sun Feb 29 23:22:45 2004  Ben Pfaff  <blp@gnu.org>
4216
4217         Get rid of the old, crappy heap structure and replace it by a new,
4218         shiny, C++ STL-like heap structure.
4219         
4220         * Makefile.am: (pspp_SOURCES) Remove heap.c, heap.h.
4221
4222         * algorithm.c: (push_heap) New function.
4223         (heapify) Ditto.
4224         (pop_heap) Ditto.
4225         (make_heap) Ditto.
4226         (sort_heap) Ditto.
4227         (is_heap) Ditto.
4228         
4229         * heap.c: Removed.
4230
4231         * heap.h: Removed.
4232
4233 Sun Feb 29 23:21:53 2004  Ben Pfaff  <blp@gnu.org>
4234
4235         Increase warning level.
4236         
4237         * Makefile.am: (AM_CFLAGS) Remove -Wnouninitialized.
4238
4239 Sat Feb 21 17:38:58 WST 2004 John Darrington <john@darrington.wattle.id.au>
4240
4241         * main.c: Added a signal handler for SIGSEGV requesting a bug report.
4242          
4243 Fri Feb 20 23:22:14 2004  Ben Pfaff  <blp@gnu.org>
4244
4245         * dictionary.c: (dict_create_var) Fix root cause of bug worked
4246         around by previous change log entry.
4247         
4248         * compute.c: (lvalue_finalize) Remove workaround from previous
4249         change log entry.
4250
4251 Fri Feb 20 14:37:41 WAST 2004 John Darrington <john@darrington.wattle.id.au>
4252
4253         * compute.c: Fixed a bug where the Format was not getting set for 
4254           computed variables (thus causing a crash when SAVEing).
4255
4256         * Added a test to stop this bug ever coming back
4257
4258 Wed Feb 18 22:21:35 2004  Ben Pfaff  <blp@gnu.org>
4259
4260         Got rid of approx.h.  In general, replaced all references to
4261         approx_eq() by ==, approx_lt() by <, etc.  Other types of changes
4262         noted below.
4263
4264         * Makefile.am: (pspp_SOURCES) Removed approx.h.
4265
4266         * data-out.c: (try_F) Replaced test for approx_eq(number, 0.0) by
4267         test for mag < EPSILON.
4268
4269         * misc.h: Add definition of EPSILON.
4270
4271 Wed Feb 18 21:32:44 2004  Ben Pfaff  <blp@gnu.org>
4272
4273         * vfm.c: (procedure) Add check to prevent recursive call.
4274
4275 Wed Feb 18 21:48:54 WST 2004 John Darrington <john@darrington.wattle.id.au>
4276
4277         * Moved the declarations relating to values to their own header file
4278           (val.h)
4279
4280         * Added levene.c and levene.h
4281
4282         * vars-atr.c: Changed the signature of compare_values to 
4283         take const * arguments.
4284                 
4285         * t-test.q: Changed the structure of struct t_test_proc 
4286        variables now contain their own group statistics information.
4287        Eventually, t_test_proc might get renamed, because it'd be 
4288        applicable to other commands too.
4289
4290 Mon Feb 16 23:15:51 2004  Ben Pfaff  <blp@gnu.org>
4291
4292         * data-out.c: Clean up.  Changed interface of convert_*() to take
4293         either a `double' or a `const char *' instead of a `const union
4294         value *'.  Update all implementations of those interfaces.
4295         (data_out) Use switch statements instead of a table.
4296         (convert_AHEX) Rewrite.
4297
4298         * format.h: Update comment.
4299
4300 Mon Feb 16 22:14:36 2004  Ben Pfaff  <blp@gnu.org>
4301
4302         * q2c.c: (dump_header) Add an Emacs header line to output files
4303         that makes generated .c files read-only by default, to make it
4304         difficult to accidentally change generated files.
4305
4306 Mon Feb 16 22:12:07 2004  Ben Pfaff  <blp@gnu.org>
4307
4308         * frequencies.q: (compare_freq_numeric_a) Compare by frequency,
4309         not bogus a->v.c <=> b->v.c pointer compare.
4310         (compare_freq_alpha_a) Ditto.
4311         (compare_freq_numeric_d) Ditto.
4312         (compare_freq_alpha_d) Ditto.
4313         
4314 Mon Feb 16 22:00:53 2004  Ben Pfaff  <blp@gnu.org>
4315
4316         Changed data_out() to store string data directly into a `union
4317         value''s s member, not indirectly into c.
4318
4319         * crosstabs.q: (output_pivot_table) Use format_short() instead of
4320         data_out().
4321         (table_value_missing) Ditto.
4322         (float_M_suffix) Ditto.
4323         (format_short) New function.
4324
4325         * data-in.h: (data_in_finite_line) Remove inline definition.
4326
4327         * data-list.c: (destroy_dls_var_spec) New function.
4328         (destroy_dls) Rewrite in terms of destroy_dls_var_spec().
4329         (data_list_source_destroy_source) Avoid cast.
4330         (struct repeating_data_trns) New field `id_value'.  Update
4331         comments.
4332         (cmd_repeating_data) Initialize id_value.  Use new
4333         repeating_data_trns_free() for freeing REPEATING DATA
4334         transformations.
4335         (rpd_parse_record) Rewrite support for record ID to be less bogus.
4336         (repeating_data_trns_free) New function.
4337
4338         * data-out.c: (data_out) Change return type to `void' by replacing
4339         error returns by writing a message into the output buffer.
4340         (convert_A) Read from v->s instead of v->c.
4341         (convert_AHEX) Ditto.
4342
4343         * expr-evl.c: Update comment.
4344         (expr_evaluate) Add assertion in OP_STRING case.
4345
4346         * format.h: (macro MAX_FORMATTED_LEN) New macro.
4347
4348         * list.q: (list_cases) Update for new data_out() semantics.
4349
4350         * print.c: (print_trns_proc) Ditto.
4351
4352         * tab.c: (tab_value) Ditto.
4353         (tab_float) Avoid stupid cast.
4354
4355         * var.h: Update comments.
4356         (macro MAX_STRING) New macro.
4357         (macro MAX_ELEMS_PER_VALUE) New macro.
4358
4359         * vars-atr.c: (compare_values) New function.
4360
4361         * vfm.c: (dump_splits) Update for new data_out() semantics.
4362
4363 Mon Feb 16 21:45:47 2004  Ben Pfaff  <blp@gnu.org>
4364
4365         * crosstabs.q: (struct table_entry) Rename v[] to values[].  All
4366         references updated.
4367         (struct crosstab) Rename v[] to vars[].  All references updated.
4368         (hash_table_entry) Replace the hash algorithm and fix a bug at the
4369         same time, which caused the hash value to depend only on a single
4370         value, not all of the variables' values.
4371         
4372 Mon Feb 16 12:49:53 2004  Ben Pfaff  <blp@gnu.org>
4373
4374         Clean up struct dictionary's value_cnt usage.
4375
4376         * dictionary.c: Add a function comment to each function.
4377         (struct dictionary) Rename value_cnt to next_value_idx, which more
4378         accurately reflects its meaning.  All references updated.
4379         (dict_rename_vars) Add assertion.
4380         (dict_get_value_cnt) Rename dict_get_next_value_idx().  All
4381         references updated.
4382         (dict_get_case_size) New function.
4383
4384         * aggregate.c: (create_sysfile) Use dict_get_case_size().
4385
4386         * get.c: (mtf_read_nonactive_records) Ditto.
4387
4388         * sort.c: (allocate_cases) Ditto.
4389         (write_initial_runs) Ditto.
4390         (merge) Ditto.
4391         (merge_once) Ditto.
4392
4393         * vfm.c: (prepare_for_writing) Ditto.
4394         (setup_lag) Ditto.
4395         (lag_case) Ditto.
4396
4397 Mon Feb 16 00:17:55 2004  Ben Pfaff  <blp@gnu.org>
4398
4399         Make vfm.c slightly less grotesque.
4400
4401         * vfm.c: (filter_var) Removed.
4402         (filter_index) Removed.
4403         (FILTERED macro) Removed.
4404         (exclude_this_case) New function.
4405         (process_active_file_write_case) Use exclude_this_case() instead
4406         of FILTERED and inline tests.
4407         (procedure_write_case) Ditto.
4408         (setup_filter) Removed.
4409         (open_active_file) Don't call setup_filter().
4410         (close_active_file) Call dict_get_filter() instead of checking
4411         filter_var.
4412
4413 Mon Feb 16 00:01:53 2004  Ben Pfaff  <blp@gnu.org>
4414
4415         * var.h: (struct variable) Update comments.
4416
4417 Sun Feb 15 23:14:59 2004  Ben Pfaff  <blp@gnu.org>
4418
4419         New functions dict_create_var_assert(), dict_lookup_var_assert().
4420         Converted several dict_*_var()/assert pairs into a single
4421         dict_*_var_assert().
4422
4423         * dictionary.c: (dict_create_var_assert) New function.
4424         (dict_lookup_var_assert) New function.
4425
4426 Sun Feb 15 23:06:08 2004  Ben Pfaff  <blp@gnu.org>
4427
4428         Got rid of "struct long_vec", envector(), devector(), etc.  Added
4429         two members `init', `reinit' to struct variable as a substitute.
4430         
4431         * Makefile.am: (pspp_SOURCES) Removed cases.c, cases.h.
4432         
4433         * cases.c: Removed.
4434
4435         * cases.h: Removed.
4436
4437         * aggregate.c: (parse_aggregate_functions) destvar doesn't need
4438         init.
4439
4440         * autorecode.c: (cmd_autorecode) destvars don't need init.
4441
4442         * compute.c: (lvalue_finalize) Set reinit.
4443
4444         * data-list.c: (fixed_parse_compatible) Don't need init usually.
4445         (dump_fmt_list) Ditto.
4446         (parse_free) Ditto.
4447
4448         * descript.q: (run_z_pass) Don't need init for z-scores.
4449
4450         * dictionary.c: (dict_create_var) Initialize `init', `reinit'
4451         members.
4452         (dict_clone_var) Copy `reinit' member, initialize `init' member.
4453
4454         * glob.c: (init_glob) Remove vec_init() calls.
4455
4456         * inpt-pgm.c: (cmd_end_input_program) Use `reinit', not `left'.
4457         
4458         * loop.c: (internal_cmd_loop) Don't need to call envector().
4459
4460         * numeric.c: (cmd_numeric) Ditto.
4461         (cmd_string) Ditto.
4462         (cmd_leave) Ditto.  Set `init', `reinit' members.
4463
4464         * recode.c: (cmd_recode) Don't need to call envector().
4465
4466         * repeat.c: (internal_cmd_do_repeat) Ditto.
4467
4468         * var.h: (struct variable) Remove `left'.  Add `init', `reinit'.
4469         (force_create_variable) Removed prototype.
4470         (force_dup_variable) Ditto.
4471
4472         * vector.c: (cmd_vector) Don't need to call envector().
4473
4474         * vfm.c: (reinit_sysmis) Removed.
4475         (reinit_blanks) Removed.
4476         (init_zero) Removed.
4477         (init_blanks) Removed.
4478         (process_active_file_write_case) No need to deal with vectors.
4479         Call clear_temp_case().
4480         (vector_initialization) Rewrite to use `init', `reinit'.
4481         (close_active_file) No need to call vec_clear().
4482         (procedure_write_case) Call clear_temp_case().
4483         (clear_temp_case) New function.
4484
4485 Sun Feb 15 20:50:36 2004  Ben Pfaff  <blp@gnu.org>
4486
4487         * pfm-write.c: (bufwrite) Get rid of nasty cast that also invoked
4488         undefined behavior.
4489
4490 Thu Feb 12 23:35:15 2004  Ben Pfaff  <blp@gnu.org>
4491
4492         Add auxiliary argument to procedure() interface.  Associated small
4493         clean-ups of vfm interface.
4494         
4495         * Updated every caller of procedure() and process_active_file() to
4496         reflect modified interface.  Simple, ordinary changes not listed
4497         otherwise below.
4498
4499         * Updated every function that implements struct case_stream's
4500         `read' function to take a write_case_func and a write_case_data.
4501         Also updated every caller of write_case() to instead call them
4502         through these arguments.  In some cases this meant that the extra
4503         args had to be threaded through a couple of extra levels.  This
4504         wasn't difficult or interesting so the details won't be given.
4505
4506         * data-list.c: (struct repeating_data_trns) Add members
4507         `write_case', `wc_data' as kluge.
4508         (read_one_set_of_repetitions) Rename repeating_data_trns_proc and
4509         make non-static.
4510         (repeating_data_set_write_case) New function.
4511
4512         * data-list.h: New file to declare repeating_data_trns_proc() and
4513         repeating_data_set_write_case().
4514
4515         * inpt-pgm.c: (input_program_source_read) Call
4516         repeating_data_set_write_case() for all the REPEATING DATA
4517         transformations, so that they know where to send their cases.
4518         It's a big kluge.  Also kluge in END CASE.
4519         (end_case_trns_proc) Never called anymore, but we still need it,
4520         so just assert(0).
4521
4522         * sort.c: (read_sort_output) Update to match struct case_stream
4523         `read' member.
4524
4525         * vfm.c: (struct write_case_data) New structure.
4526         (proc_func) Removed.
4527         (virt_proc_func) Removed.
4528         (begin_func) Removed.
4529         (virt_begin_func) Removed.
4530         (end_func) Removed.
4531         (write_case) Removed.
4532         (procedure) Added an auxiliary parameter to each function pointer
4533         argument's prototype.  Added an auxiliary data parameter.
4534         Rewrote.
4535         (process_active_file) Ditto.
4536         (process_active_file_write_case) Pass aux data along.
4537         (close_active_file) Ditto.
4538         (procedure_write_case) Ditto.
4539         (SPLIT_FILE_procfunc) Ditto.
4540
4541         * vfm.h: (typedef write_case_data) New.
4542         (typedef write_case_func) New.
4543         (struct case_stream) Add parameters to `read' member prototype.
4544         
4545 Thu Feb 12 19:24:53 WST 2004 John Darrington <john@darrington.wattle.id.au>
4546
4547         * t-test.q:  Added calculations for independent samples. (But no Levene
4548         test yet!)
4549
4550         * Makefile.am: Moved q_sources_c into own variable 
4551
4552 Wed Feb 11 23:56:51 2004  Ben Pfaff  <blp@gnu.org>
4553
4554         Miscellaneous cleanups.
4555         
4556         * Change unused to UNUSED in many source files to reflect modified
4557         pref.h.  Change use of __WIN32__, __MSDOS, __DJGPP__,
4558         __CYGWIN32__, __unix__, and unix not to assume that they're
4559         defined to a nonzero value.  Change use of __attribute__ to use
4560         NO_RETURN or PRINTF_FORMAT instead.
4561         
4562         * alloc.h: Move definitions for local_alloc(), local_free() here
4563         from ../pref.h.orig and simplify.
4564
4565         * expr-evl.c: Instead of working differently based on PAGED_STACK,
4566         use a pool allocator unconditionally.
4567         (CHECK_STRING_SPACE) Removed.
4568         (ALLOC_STRING_SPACE) Removed.
4569         (expr_evaluate) Use e->pool instead of CHECK_STRING_SPACE and
4570         ALLOC_STRING_SPACE.
4571
4572         * expr-opt.c: (dump_expression) Allocate string pool.
4573
4574         * expr-prs.c: (expr_free) Free string pool.
4575
4576         * pool.c: (pool_destroy) This pool must be removed from its
4577         parent's list of gizmos, not from its own.  Use free_all_gizmos().
4578         (pool_clear) New function.
4579         (free_all_gizmos) New function.
4580         (pool_alloc) Use space in empty block after this one if any.
4581         (pool_release) Only empty out blocks, don't actually free() them.
4582
4583         * print.c: Get rid of PAGED_STACK special case by always
4584         dynamically allocating line buffers.
4585         (struct print_trns) Always include the `line' member.
4586         (internal_cmd_print) Always initialize the `line' member.
4587         (alloc_line) Always allocate memory for `line'.
4588         (print_trns_proc) Always initialize buf from `line' member.
4589         (print_trns_free) Always free `line' memory.
4590
4591         * sort.c: (allocate_file_handles) Special-case MS-DOS for mkdir()
4592         call.
4593         
4594 Wed Feb 11 20:33:18 2004  Ben Pfaff  <blp@gnu.org>
4595
4596         * flip.c: Fixed crash from FLIP when a numeric variable is
4597           specified on NEWNAMES and a large value is used, and a couple of
4598           other minor bugs besides.
4599           (struct varname) Make name a 9-character fixed-size array
4600           instead of a 1-character variable size array.
4601           (make_new_var) Allow digits in variable names.
4602           (flip_stream_write) Limit numeric values to 8 characters and
4603           format system missing and very large and small values more
4604           appropriately.
4605
4606 Thu Feb  5 13:19:06 WAST 2004 John Darrington <john@darrington.wattle.id.au>
4607
4608         * command.c: Fixed test on command return status for the correct 
4609           value,  which had been causing a crash under certain invalid input.
4610
4611 Wed Feb  4 15:34:11 WST 2004 John Darrington <john@darrington.wattle.id.au>
4612
4613         * t-test.q: Added calculations for the one sample variant of the T-TEST
4614
4615 Tue Feb  3 20:09:54 2004  Ben Pfaff  <blp@gnu.org>
4616
4617         * tab.c: (render_strip) Fix bug that sometimes caused joined text
4618           in joined cells to be rendered outside box boundaries.
4619
4620 Tue Feb  3 18:56:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
4621
4622         * random.c (rng_create): Fixed seeding so that it gets reseeded after
4623         SET seed=xx has been called.
4624
4625 Mon Jan 19 14:08:09 2004  Ben Pfaff  <blp@gnu.org> 
4626
4627         * random.c (rng_get_double): Fix always-returning-zero bug in my
4628         preferred way, and at the same time make sure rounding doesn't
4629         bite us.
4630
4631 Thu Jan  1 23:16:41 2004  Ben Pfaff  <blp@gnu.org>
4632
4633         * html.c: (change_attributes) Dead code, removed.
4634         (escape_string) Eliminate code to call change_attributes() that
4635         never actually called it.
4636         (output_tab_table) Get rid of dependence on tab_hit
4637         and struct tab_joined_cell's hit member, which are abominations.
4638
4639         * tab.c: (tab_output_text) Don't call
4640         d->class->text_set_font_by_name if it's a null pointer.
4641         (macro UNROLL_LOOP) Eliminate.
4642         (macro UNROLL_3_LOOPS) Eliminate.
4643         (tabi_render) Rewrite not to use the above macros.
4644
4645 Thu Jan  1 23:09:07 2004  Ben Pfaff  <blp@gnu.org>
4646
4647         Start working on a new output driver system, one that doesn't suck
4648         so much, by adding a "device-independent" output driver.  The idea
4649         is to write out only a single output stream, then use separate
4650         processes to translate them into whatever formats we want.  This
4651         is similar to how "groff" works with its various output drivers
4652         (grops, grotty, grodvi, ...).
4653         
4654         * Makefile.am: (pspp_SOURCES) Add devind.c, devind.h.
4655
4656         * list.q: (write_all_headers) Stub out devind class.
4657         (clean_up) Ditto.
4658         (determine_layout) Ditto.
4659         (list_cases) Ditto.
4660
4661         * output.c: (outp_init) Add devind class.
4662
4663         * devind.c: New file.
4664
4665         * devind.h: New file.
4666
4667 Thu Jan  1 23:08:14 2004  Ben Pfaff  <blp@gnu.org>
4668
4669         * frequencies.q: (hash_value_alpha) Fixed up the previous change
4670         to use the proper string length.
4671
4672 Wed Dec 31 16:27:33 WAST 2003 John Darrington <john@darrington.wattle.id.au>
4673
4674         * Fixed bug where FREQ would crash on alpha values
4675
4676 Tue Dec 30 22:42:57 2003  Ben Pfaff  <blp@gnu.org>
4677
4678         * Removed bletcherous alloca() workarounds for AIX from top of
4679         many files.  AIX can use the alternative alloca() implementation
4680         instead.
4681
4682 Tue Dec 30 22:35:16 2003  Ben Pfaff  <blp@gnu.org>
4683
4684         * ascii.c: (ascii_option) Fix implementation of headers option.
4685
4686 Tue Dec 30 22:32:53 2003  Ben Pfaff  <blp@gnu.org>
4687
4688         * ascii.c: Add a "squeeze" option to the ASCII driver to squeeze
4689         multiple blank lines into one.
4690         (struct ascii_driver_ext) Add squeeze_blank_lines option.
4691         (ascii_preopen_driver) Initialize squeeze_blank_lines.
4692         (static var option_tab) Add squeeze entry.
4693         (ascii_option) Set squeeze_blank_lines.
4694         (output_lines) Implement squeezing blank lines.
4695
4696 Wed Dec 31 07:19:46 WST 2003 John Darrington <john@darrington.wattle.id.au>
4697
4698         * Removed redundant code from output.h
4699
4700 Sat Dec 27 22:17:52 2003  Ben Pfaff  <blp@gnu.org>
4701
4702         Dictionary classes: each variable is "ordinary", "system", or
4703         "scratch".
4704
4705         * var.h: (enum dict_class) New enum.
4706
4707         * vars-prs.c: (dict_class_from_id) New function.
4708         (dict_class_to_name) New function.
4709
4710 Sat Dec 27 22:16:06 2003  Ben Pfaff  <blp@gnu.org>
4711
4712         * var.h: (struct freq_tab_set) Removed (not used).
4713
4714 Sat Dec 27 22:15:21 2003  Ben Pfaff  <blp@gnu.org>
4715
4716         * value-labels.c: (val_labs_destroy) vls needs to be freed too.
4717
4718 Sat Dec 27 22:10:49 2003  Ben Pfaff  <blp@gnu.org>
4719
4720         * stats.c: (hypercube) Rename pow4().  All references updated.
4721
4722 Sat Dec 27 22:05:49 2003  Ben Pfaff  <blp@gnu.org>
4723
4724         * rename-vars.c: (cmd_rename_variables) Rewritten.
4725         (compare_name) Removed.
4726
4727 Sat Dec 27 22:03:51 2003  Ben Pfaff  <blp@gnu.org>
4728
4729         var_set feature, and code taking advantage of it.
4730         
4731         * crosstabs.q: (static var var_dict) Removed.
4732         (static var variables) New variable.
4733         (static var variables_cnt) New variable.
4734         (cmd_crosstabs) Free variables instead of var_dict.
4735         (internal_cmd_crosstabs) Initialize and use variables,
4736         variables_cnt instead of var_dict.
4737         (free_var_dict) Removed.
4738         (crs_custom_tables) Use var_set instead of a copied dictionary.
4739         (crs_custom_variables) Set up variables, variables_cnt instead of
4740         var_dict.
4741         [DEBUGGING] (debug_print) Ditto.
4742
4743         * means.q: (mns_custom_tables) Use var_set instead of a copied
4744         dictionary.
4745
4746         * vars-prs.c: (parse_vs_variable) New function.
4747         (parse_dict_variable) Rewritten.
4748         (parse_variable) Rewritten.
4749         (parse_variables) Renamed parse_var_set_vars(), rewritten.
4750         (parse_variables) New function in terms of parse_var_set_vars().
4751         Now requires its first argument to be non-null.  All references
4752         that passed a null pointer updated to pass default_dict instead.
4753         (macro id_dict) Removed.
4754         (parse_DATA_LIST_vars) Add assertions.
4755         (parse_mixed_vars) Ditto.
4756         (struct var_set) New structure.
4757         (var_set_get_cnt) New function.
4758         (var_set_get_var) New function.
4759         (var_set_lookup_var) New function.
4760         (var_set_destroy) New function.
4761         (dict_var_set_get_cnt) New function.
4762         (dict_var_set_get_var) New function.
4763         (dict_var_set_lookup_var) New function.
4764         (dict_var_set_destroy) New function.
4765         (var_set_create_from_dict) New function.
4766         (struct array_var_set) New structure.
4767         (array_var_set_get_cnt) New function.
4768         (array_var_set_get_var) New function.
4769         (array_var_set_lookup_var) New function.
4770         (array_var_set_destroy) New function.
4771         (var_set_create_from_array) New function.
4772
4773         * q2c.c: (dump_parser) Use parse_variables(default_dict, ...)
4774         instead of parse_variables(NULL, ...) in output code.
4775
4776 Sat Dec 27 21:38:53 2003  Ben Pfaff  <blp@gnu.org>
4777
4778         Change inp_init from a 2-bit vector to an ordinary array.
4779         Initialize it all in cmd_end_input_program() instead of in
4780         create_variable().
4781
4782         * inpt-pgm.c: (enum value_init_type) New enum.
4783         (global var inp_init) Change to `enum value_init_type *', make
4784         static.
4785         (inp_init_size) Removed.
4786         (inp_nval) Change to `size_t', make static.
4787         (cmd_input_program) Don't initialize inp_init or inp_init_size.
4788         (cmd_end_input_program) Initialize inp_init, inp_nval.
4789         (init_case) Rewrite.
4790         (clear_case) Rewrite.
4791
4792         * inpt-pgm.h: Removed.
4793
4794 Sat Dec 27 21:36:38 2003  Ben Pfaff  <blp@gnu.org>
4795
4796         * hash.c: (hsh_hash_bytes) Use Fowler-Noll-Vo hash instead of
4797         Colin Plumb hash.  It is simpler and should better resist
4798         collisions.
4799         (hsh_hash_string) Ditto.
4800
4801 Sat Dec 27 21:34:57 2003  Ben Pfaff  <blp@gnu.org>
4802
4803         * get.c: (export_write_case_func) Remove debug printing code.
4804
4805 Sat Dec 27 21:11:09 2003  Ben Pfaff  <blp@gnu.org>
4806
4807         * get.c: (cmd_save_internal) Rename parameter.  Use &t->h instead
4808         of cast.
4809         (save_write_case_func) Use &trns->h instead of cast.
4810         (cmd_export) Use &t->h instead of cast.
4811
4812 Sat Dec 27 20:57:42 2003  Ben Pfaff  <blp@gnu.org>
4813
4814         Moved vectors into the dictionary.
4815
4816         * var.h: (struct vector) Moved here from vector.h.  `index' member
4817         renamed `idx', `v' renamed `var', `nv' renamed `cnt'.  All
4818         references updated.
4819         
4820         * vector.h: Removed.
4821
4822         * vector.c: (global var vec) Removed.
4823         (global var nvec) Removed.
4824         (cmd_vector) Rewritten.
4825         (find_vector) Removed.
4826
4827         * dictionary.c: (dict_create_vector) New function.
4828         (dict_get_vector) New function, replaces reading global vec[]
4829         array.
4830         (dict_get_vector_cnt) New function, replaces reading global nvec
4831         variable.
4832         (dict_lookup_vector) New function, replaces find_vector().
4833         (dict_clear_vectors) New function.
4834
4835 Sat Dec 27 20:54:01 2003  Ben Pfaff  <blp@gnu.org>
4836
4837         Start to move away from `struct variable' p `union' member to void
4838         * aux member.
4839
4840         * var.h: (struct variable) Add `aux' member.
4841
4842 Sat Dec 27 20:36:25 2003  Ben Pfaff  <blp@gnu.org>
4843
4844         Get rid of struct variable `foo' member.
4845
4846         * frequencies.q: (internal_cmd_frequencies) Use p.frq.used instead
4847         of foo.
4848         (frq_custom_variables) Ditto.
4849         (frq_custom_grouped) Ditto.
4850
4851         * get.c: (struct save_trns) Change `var' member from `int *' to
4852         `struct variable **'.
4853         (cmd_save_internal) Use aux instead of foo.
4854         (save_trns_proc) Use revised `var' member.
4855         (static var mtf_seq_no) Renamed mtf_seq_num.
4856         (static var mtf_seq_nums) New static var.
4857         (cmd_match_files) Initialize mtf_seq_nums.
4858         (mtf_free) Free mtf_seq_nums.
4859         (mtf_processing) Use mtf_seq_nums instead of foo.
4860         (mtf_merge_dictionary) No need to initialize mv->foo.
4861         (cmd_export) Use aux instead of foo.  Use revised `var' member.
4862         (mns_custom_tables) Don't use foo to check for duplicates, that's
4863         what PV_NO_DUPLICATE is for.
4864
4865         * var.h: (struct variable) Remove `foo' member.
4866         (struct frequencies_proc) New member.
4867         
4868 Sat Dec 27 19:46:13 2003  Ben Pfaff  <blp@gnu.org>
4869
4870         Clean up COMPUTE and IF.
4871
4872         * compute.c: More or less rewrite the darn thing.
4873         (struct compute_trns) Rename and reorder and add and delete
4874         members.
4875         (cmd_compute) Rewrite.
4876         (compute_num) Make conditional on test expression.  Now used for
4877         both COMPUTE and IF.
4878         (compute_num_vec) Ditto.
4879         (compute_str) Ditto.
4880         (compute_str_vec) Ditto.
4881         (cmd_if) Rewrite.
4882         (if_num) Removed.
4883         (if_num_vec) Removed.
4884         (if_str) Removed.
4885         (if_str_vec) Removed.
4886         (parse_target_expression) Renamed parse_rvalue_expression(),
4887         rewritten.
4888         (new_trns) Renamed compute_trns_create(), rewritten.
4889         (delete_trns) Removed.
4890         (free_trns) Renamed compute_trns_free(), rewritten.
4891         (struct lvalue) New structure.
4892         (parse_var_or_vec) Renamed lvalue_parse(), rewritten.
4893         (lvalue_get_type) New function.
4894         (lvalue_is_vector) New function.
4895         (lvalue_finalize) New function.
4896         (lvalue_destroy) New function.
4897         
4898 Sat Dec 27 19:44:14 2003  Ben Pfaff  <blp@gnu.org>
4899
4900         * command.def: Disallow MODIFY VARS in input mode, so that
4901         variables can't get dropped and confuse cmd_end_input_program()'s
4902         attempt to fill inp_init[].
4903         
4904         * modify-vars.c: (static var forward_positional_ordering) New
4905         variable.
4906         (struct var_modification) Entirely changed.
4907         (rearrange_dict) Interface changed, rewritten.
4908         (cmd_modify_vars) Deal with modified struct var_modification, much
4909         rewritten.
4910         (struct var_renaming) New structure.
4911         (compare_var_renaming_by_new_name) New function.
4912         (validate_var_modification) New function.
4913
4914         * var.h: (struct modify_vars_proc) Removed.
4915         (struct variable) Removed member p.mfv.
4916
4917 Sat Dec 27 19:40:26 2003  Ben Pfaff  <blp@gnu.org>
4918
4919         Make EVALUATE a valid command whether we're debugging or not, so
4920         that `make check' can succeed regardless of whether debugging is
4921         turned on.
4922         
4923         * command.def: [GLOBAL_DEBUGGING] Drop the #if.
4924
4925         * compute.c: [GLOBAL_DEBUGGING] (cmd_evaluate) Drop the #if.
4926
4927 Sat Dec 27 19:34:40 2003  Ben Pfaff  <blp@gnu.org>
4928
4929         * apply-dict.c: (cmd_apply_dictionary) Replace a ghastly switch
4930         statement by a simple if test.
4931
4932         * dfm.c: (dfm_get_record) Add assertion.
4933
4934 Sat Dec 27 17:51:26 2003  Ben Pfaff  <blp@gnu.org>
4935
4936         For each file x.c, move #include "x.h" to the very top of the
4937         include list, to catch x.h failing to include the proper headers.
4938
4939 Sat Dec 27 17:50:19 2003  Ben Pfaff  <blp@gnu.org>
4940
4941         * algorithm.c: (find) New function.
4942         (remove_equal) New function.
4943         (set_difference) New function.
4944         (adjacent_find_equal) New function.
4945         [TEST_UNIQUE] Removed test case.
4946         (copy_if) Find end test.
4947
4948 Sat Dec 27 17:42:45 2003  Ben Pfaff  <blp@gnu.org>
4949
4950         * dictionary.c: (dict_get_case_weight) New convenience function.
4951
4952         * aggregate.c: (accumulate_aggregate_info) Use
4953         dict_get_case_weight().
4954
4955         * frequencies.q: (calc_general) Ditto.
4956         (calc_integer) Ditto.
4957         (calc) Ditto.
4958
4959         * t-test.q: (groups_calc) Ditto.
4960         (z_calc) Ditto.
4961
4962 Sat Dec 27 17:29:45 2003  Ben Pfaff  <blp@gnu.org>
4963
4964         * glob.c: (global var default_dict) Change from `struct
4965         dictionary' to `struct dictionary *'.  All references changed.
4966         (init_glob) Initialize default_dict with dict_create().
4967
4968 Sat Dec 27 17:06:06 2003  Ben Pfaff  <blp@gnu.org>
4969
4970         struct dictionary now made opaque.  All related functions:
4971
4972         * get.c: (rename_variables) Removed.
4973         (dict_delete_run) Removed.
4974         
4975         * temporary.c: (copy_variable) Removed.
4976         (new_dictionary) Removed.
4977         (save_dictionary) Removed.
4978         (restore_dictionary) Removed.
4979         (free_dictionary) Removed.
4980
4981         * vars-atr.c: (clear_default_dict) Removed.
4982         (find_variable) Removed.
4983         (find_dict_variable) Removed.
4984         (create_variable) Removed.
4985         (delete_variable) Removed.
4986         (common_init_stuff) Removed.
4987         (init_variable) Removed.  Updating of inp_init moved into
4988         cmd_end_input_program().
4989         (replace_variable) Removed.
4990         (rename_variable) Removed.
4991         (clear_variable) Removed.
4992         (dup_variable) Removed.
4993
4994         * vars-prs.c: (is_varname) Removed.
4995         (is_dict_varname) Removed.
4996         (fill_all_vars) Removed.
4997
4998         * vector.c: (find_vector) Removed.
4999
5000         * weight.c: (stop_weighting) Removed.
5001
5002         * dictionary.c: New file.
5003         (dict_create) New, replaces new_dictionary().
5004         (dict_clone) New, replaces save_dictionary() and
5005         restore_dictionary().
5006         (dict_clear) New, replaces clear_default_dict().
5007         (dict_destroy) New, replaces free_dictionary().
5008         (dict_get_var_cnt) New function, replaces references to
5009         dict->nvar.
5010         (dict_get_var) New function, replaces references to dict->var[i].
5011         (dict_get_vars) New function, replaces fill_all_vars().
5012         (dict_create_var) New, replaces create_variable().  Interface
5013         drops `type' parameter, using a zero `width' to designate numeric.
5014         (dict_clone_var) New, replaces dup_variable().
5015         (dict_rename_var) New, replaces rename_variable().
5016         (dict_lookup_var) New, replaces find_variable(),
5017         find_dict_variable(), is_varname().
5018         (dict_contains_var) New function.
5019         (compare_variable_dblptrs) New function.
5020         (dict_delete_var) New function, replaces clear_variable().
5021         (dict_delete_vars) New function, replaces dict_delete_run().
5022         (dict_reorder_vars) New function.
5023         (dict_rename_vars) New function, replaces rename_variables().
5024         (dict_get_weight) New function, replaces reading dict->weight_var.
5025         (dict_set_weight) New function, replaces writing dict->weight_var
5026         or calling stop_weight(dict).
5027         (dict_get_filter) New function, replaces reading dict->filter_var.
5028         (dict_set_filter) New function, replaces writing dict->filter_var.
5029         (dict_get_case_limit) New function, replaces reading dict->N.
5030         (dict_set_case_limit) New function, replaces writing dict->N.
5031         (dict_get_value_cnt) New function, replaces reading dict->nval.
5032         (dict_compact_values) New function, replaces a loop that was
5033         replicated in several places.
5034         (dict_get_split_vars) New function, replaces reading dict->splits.
5035         (dict_get_split_cnt) New function, replaces reading
5036         dict->n_splits.
5037         (dict_set_split_vars) New function, replaces writing dict->splits.
5038         (dict_get_label) New function, replaces reading dict->label.
5039         (dict_set_label) New function, replaces writing dict->label.
5040         (dict_get_documents) New function, replaces reading
5041         dict->documents.
5042         (dict_set_documents) New function, replaces writing
5043         dict->documents.
5044         
5045         All references to above functions updated.
5046         
5047         * aggregate.c: (cmd_aggregate) Copy file label and documents from
5048         old dictionary to new by hand, because dict_create() can't do it
5049         itself.  Use dict_set_documents(), dict_set_split_vars().
5050
5051         * temporary.c: (cancel_temporary) Also set temp_dict to NULL after
5052         calling dict_destroy().
5053
5054         * data-list.c: (dls_var_spec) Remove `type' member, replace by
5055         `width'.
5056         (fixed_parse_compatible) Some slightly nontrivial changes for
5057         dict_create_var().
5058         (dump_fmt_list) Ditto.
5059         (parse_free) Ditto.
5060
5061         * file-type.c: (create_col_var) Ditto.
5062
5063         * get.c: (cmd_get) Use dict_compact_values() instead of a loop.
5064         (trim_dictionary) Use dict_delete_vars(), dict_reorder_vars().
5065         (rename_variables) Use dict_rename_vars().
5066         (mtf_merge_dictionary) Use dict_get_documents(),
5067         dict_set_documents(), dict_compact_values().
5068
5069         * pfm-read.c: (read_variables) Deal with changes to weighting.
5070
5071         * q2c.c: (dump_parser) Use dict_lookup_var() instead of
5072         is_varname() in output code.
5073
5074         * sfm-read.c: (read_header) Use dict_create(), dict_set_label(),
5075         other dictionary functions.
5076
5077         * title.c: (add_document_line) Use dict_get_documents(),
5078         dict_set_documents().
5079
5080         * vars-atr.c: (discard_variables) Use dict_clear(default_dict),
5081         reset default_handle by hand.  dict_clear() will clear vectors so
5082         there's no need for that by hand.
5083
5084         * vfm.c: (close_active_file) Move call to finish_compaction()
5085         earlier, so that we can do the compaction as a single step using
5086         dict_compact_values().  Use dict_clear_vectors().
5087         (finish_compaction) Use dict_delete_var(), dict_compact_values().
5088                 
5089         Some functions don't have replacements:
5090
5091         * vars-atr.c: (force_create_variable) Removed.  All references
5092         updated to dict_create_var() followed by an assertion.
5093         (force_dup_variable) Removed.  All references updated to
5094         dict_clone_var() followed by an assertion.
5095         
5096         * weight.c: (update_weighting) Removed.  No longer necessary, so
5097         all references removed.
5098
5099 Sat Dec 27 16:43:01 2003  Ben Pfaff  <blp@gnu.org>
5100
5101         Clean up AGGREGATE.
5102         
5103         * aggregate.c: Eliminate separation of weighted and unweighted
5104         case.  It made the code too obscure and I doubt it was actually
5105         faster.  Instead, all code uses the "weighted" code, because
5106         that's a generalization of the "unweighted" code.
5107         (FWEIGHT) Removed.
5108         (FOPTIONS) Ditto.
5109         (parse_aggregate_functions) No need to set FWEIGHT.
5110         (accumulate_aggregate_info) Get rid of FWEIGHT cases.
5111         (dump_aggregate_info) Ditto.
5112         (initialize_aggregate_info) No need for special plain_function
5113         that gets rid of FWEIGHT option.
5114
5115         * aggregate.c: Get rid of approximations.
5116         (accumulate_aggregate_info) Don't use approx_gt(), approx_lt(),
5117         approx_in_range().
5118         (aggregate_single_case) Don't use approx_ne().
5119
5120 Sat Dec 27 16:19:36 2003  Ben Pfaff  <blp@gnu.org>
5121
5122         * ascii.c (ascii_line_width): Dead code, removed.
5123
5124         * postscript.c (ps_line_width): Ditto.
5125
5126         * q2c.c (xrealloc): Ditto.
5127
5128         * count.c (internal_cmd_count): Ditto.
5129
5130         * means.q (validate_dependent_endpoint): Ditto.
5131
5132         * set.q: (cmd_gset) Ditto.
5133
5134         * weight.c: [0] (weight_trns_proc) Ditto.
5135
5136 Sat Dec 27 16:18:16 2003  Ben Pfaff  <blp@gnu.org>
5137
5138         Make the code -Wmissing-prototypes clean.
5139
5140         * Makefile.am (version.c): Add #include "version.h".
5141         
5142         * ascii.c: (ascii_open_global) Make static.
5143         (ascii_close_page) Ditto.
5144         (ascii_font_sizes) Ditto.
5145         (ascii_postopen_driver) Ditto.
5146         (ascii_close_driver) Ditto.
5147         (ascii_option) Ditto.
5148         (ascii_open_page) Ditto.
5149         (ascii_line_horz) Ditto.
5150         (ascii_line_vert) Ditto.
5151         (ascii_line_intersection) Ditto.
5152         (ascii_box) Ditto.
5153         (ascii_polyline_begin) Ditto.
5154         (ascii_polyline_point) Ditto.
5155         (ascii_polyline_end) Ditto.
5156         (ascii_text_set_font_by_name) Ditto.
5157         (ascii_text_set_font_by_position) Ditto.
5158         (ascii_text_set_font_by_family) Ditto.
5159         (ascii_text_get_font_name) Ditto.
5160         (ascii_text_get_font_family) Ditto.
5161         (ascii_text_set_size) Ditto.
5162         (ascii_text_get_size) Ditto.
5163         (ascii_text_metrics) Ditto.
5164         (ascii_text_draw) Ditto.
5165         (ascii_close_page) Ditto.
5166
5167         * cmdline.h: New header for parse_command_line().  Used where
5168         needed.
5169
5170         * command.c: Move prototypes for cmd_*() functions to command.h.
5171
5172         * command.h: Prototypes for cmd_*() functions moved here from
5173         command.c.
5174
5175         * crosstabs.q: (gamma_int) Ditto.
5176
5177         * file-handle.h: Add fh_init_files() prototype.
5178         
5179         * getline.c: (welcome) Ditto.
5180
5181         * glob.h: New header for init_glob().  Used where appropriate.
5182
5183         * hash.c: (comparison_helper) Ditto.
5184
5185         * html.c: (html_open_global) Ditto.
5186         (html_close_global) Ditto.
5187         (html_preopen_driver) Ditto.
5188         (html_postopen_driver) Ditto.
5189         (html_close_driver) Ditto.
5190         (html_option) Ditto.
5191         (html_open_page) Ditto.
5192         (html_close_page) Ditto.
5193         (html_submit) Ditto.
5194
5195         * inpt-pgm.c: (input_program_source_read) Ditto.
5196
5197         * output.c: (find_defn_value) Ditto.
5198         (destroy_list) Ditto.
5199
5200         * pfm-read.c: (read_int) Ditto.
5201
5202         * postscript.c: (ps_open_global) Ditto.
5203         (ps_close_global) Ditto.
5204         (ps_font_sizes) Ditto.
5205         (ps_preopen_driver) Ditto.
5206         (ps_postopen_driver) Ditto.
5207         (ps_close_driver) Ditto.
5208         (ps_option) Ditto.
5209         (ps_open_page) Ditto.
5210         (ps_close_page) Ditto.
5211         (ps_line_horz) Ditto.
5212         (ps_line_vert) Ditto.
5213         (ps_line_intersection) Ditto.
5214         (ps_box) Ditto.
5215         (ps_polyline_begin) Ditto.
5216         (ps_polyline_point) Ditto.
5217         (ps_polyline_end) Ditto.
5218         (ps_text_set_font_by_name) Ditto.
5219         (ps_text_set_font_by_position) Ditto.
5220         (ps_text_set_font_family) Ditto.
5221         (ps_text_get_font_name) Ditto.
5222         (ps_text_get_font_family) Ditto.
5223         (ps_text_set_size) Ditto.
5224         (ps_text_get_size) Ditto.
5225         (ps_text_metrics) Ditto.
5226         (ps_text_draw) Ditto.
5227
5228         * q2c.c: (finish_up) Ditto.
5229         (xmalloc) Ditto.
5230         (xstrdup) Ditto.
5231         (get_buffer) Ditto.
5232         (st_lower) Ditto.
5233         (st_upper) Ditto.
5234         (skip_ws) Ditto.
5235         (get_line) Ditto.
5236         (add_symbol) Ditto.
5237         (find_symbol) Ditto.
5238         (lex_get) Ditto.
5239         (force_id) Ditto.
5240         (force_string) Ditto.
5241         (match_id) Ditto.
5242         (match_token) Ditto.
5243         (skip_token) Ditto.
5244         (parse) Ditto.
5245         (parse_setting) Ditto.
5246         (parse_specifier) Ditto.
5247         (parse_specifiers) Ditto.
5248         (parse_subcommand) Ditto.
5249         (dump_specifier_vars) Ditto.
5250         (is_keyword) Ditto.
5251         (make_identifier) Ditto.
5252         (dump_declarations) Ditto.
5253         (dump_specifier_init) Ditto.
5254         (dump_vars_init) Ditto.
5255         (make_match) Ditto.
5256         (dump_specifier_parse) Ditto.
5257         (dump_subcommand) Ditto.
5258         (dump_parser) Ditto.
5259         (dump_header) Ditto.
5260         (dump_free) Ditto.
5261         (recognize_directive) Ditto.
5262
5263         * recode.c: (string_to_long) Ditto.
5264
5265         * repeat.c: (find_DO_REPEAT_substitution) Ditto.
5266
5267         * repeat.h: New header for perform_DO_REPEAT_substitutions, used
5268         where appropriate.
5269
5270         * sort.c: (sort_stream_read) Ditto.
5271         (sort_stream_mode) Ditto.
5272         
5273 Fri Dec 19 23:35:04 2003  Ben Pfaff  <blp@gnu.org>
5274
5275         * algorithm.c (binary_search): Fix comparison.
5276
5277 Fri Dec 19 23:27:45 2003  Ben Pfaff  <blp@gnu.org>
5278
5279         * algorithm.c: (binary_search) Fix assertion.
5280
5281 Fri Dec 19 21:31:48 2003  Ben Pfaff  <blp@gnu.org>
5282
5283         * sysfile-info.c: (compare_vectors_by_name) Rewrite.
5284
5285 Fri Dec 19 21:30:24 2003  Ben Pfaff  <blp@gnu.org>
5286
5287         * sort.c: (compare_case_lists) Rewrite.
5288
5289 Fri Dec 19 16:44:22 2003  Ben Pfaff  <blp@gnu.org>
5290
5291         * quicksort.c: Removed (not used).
5292
5293         * quicksort.h: Removed (not used).
5294
5295         * sort.c: Removed blp_quicksort() prototype.
5296
5297 Fri Dec 19 16:42:13 2003  Ben Pfaff  <blp@gnu.org>
5298
5299         * postscript.c: (int_2_compare) Rewrite.
5300         (compare_line) Rewrite.
5301
5302 Fri Dec 19 16:38:35 2003  Ben Pfaff  <blp@gnu.org>
5303
5304         * matrix-data.c (compare_factors) Use lexicographical_compare()
5305         algorithm.
5306         (compare_doubles) New function.
5307         
5308         * algorithm.c: (lexicographical_compare) New algorithm.
5309
5310 Fri Dec 19 16:23:45 2003  Ben Pfaff  <blp@gnu.org>
5311
5312         * matrix-data.c (compare_variables_by_mxd_vartype): Rewrite.
5313
5314 Fri Dec 19 15:54:45 2003  Ben Pfaff  <blp@gnu.org>
5315
5316         * expr-prs.c: (cmp_func) Removed.
5317         (parse_function) Use binary_search() algorithm.
5318         (compare_functions) New function.
5319         (init_func_tab) Use sort() algorithm.
5320
5321         * algorithm.c: (binary_search) New algorithm.
5322
5323 Fri Dec 19 15:50:45 2003  Ben Pfaff  <blp@gnu.org>
5324
5325         * descript.q: (display) Use sort() algorithm instead of qsort().
5326         (compare_func) Removed.
5327         (descriptives_compare_variables) New function.
5328
5329 Fri Dec 19 15:08:38 2003  Ben Pfaff  <blp@gnu.org>
5330
5331         Get rid of AVL trees.  Hashes are more appropriate for everything
5332         PSPP does.
5333
5334         * Makefile.am: (pspp_SOURCES) Remove avl.c, avl.h.
5335         
5336         * avl.c: Removed.
5337
5338         * avl.h: Removed.
5339
5340 Fri Dec 19 14:33:31 2003  Ben Pfaff  <blp@gnu.org>
5341
5342         Much code can be clarified by using C++ STL-like algorithms.  Not
5343         all uses of these algorithms are listed below, only the ones where
5344         the change to an algorithm was the only change of interest.
5345         
5346         * Makefile.am: (pspp_SOURCES) Add algorithm.c, algorithm.h.
5347         
5348         * algorithm.c: New file.
5349
5350         * algorithm.h: New file.
5351
5352         * modify-vars.c: (static var forward) Removed.
5353         (static var positional) Removed.
5354         (compare_variables) Removed.
5355         (struct ordering) New.
5356         (cmd_modify_vars) Use sort() algorithm.
5357         (compare_variables_given_ordering) New function.
5358         (rearrange_dict) Use sort() algorithm.
5359
5360         * sysfile-info.c: (cmd_display) Use sort() algorithm.
5361         (cmp_var_by_name) Removed.
5362
5363 Fri Dec 19 14:26:17 2003  Ben Pfaff  <blp@gnu.org>
5364
5365         Make file handles use a hash table.
5366         
5367         * file-handle.q: (files) Change to hash table, make static.
5368         (cmd_file_handle) Use hash table functions.
5369         (fh_get_handle_by_filename) Ditto.
5370         (fh_get_handle_by_name) Ditto.
5371         (hash_file_handle) New function.
5372         (cmp_file_handle) Rewrite.
5373         (fh_init_files) Use hash table functions.
5374
5375 Fri Dec 19 14:24:38 2003  Ben Pfaff  <blp@gnu.org>
5376
5377         Clean up FREQUENCIES.
5378         
5379         * Makefile.am: (pspp_SOURCES) Remove frequencies.g.
5380
5381         * frequencies.q: Remove a lot of old #if'd out code at the end.
5382         (internal_cmd_frequencies) Use calc() instead of calc_no_weight()
5383         or calc_weight().  Initialize percentile_values.
5384         (calc) New function based on calc_weight() from frequencies.g.
5385         (precalc) Use hash functions.
5386         (static var comparison_func) Removed.
5387         (static var comparison_param) Removed.
5388         (comparison_helper) Removed.
5389         (get_freq_comparator) New function.
5390         (not_missing) New function.
5391         (add_freq) Removed.
5392         (postprocess_freq_tab) Use hash table functions, algorithms,
5393         get_freq_comparator().  Rewrite.
5394         (cleanup_freq_tab) Rephrase.
5395         (add_percentile) Clean up spacing.
5396         (hash_value_numeric) New function.
5397         (hash_value_alpha) New function.
5398         (compare_value_numeric_a) Rewrite.
5399         (compare_value_alpha_a) Rewrite.
5400         (compare_value_numeric_d) Rewrite.
5401         (compare_value_alpha_d) Rewrite.
5402         (compare_freq_numeric_a) Rewrite.
5403         (compare_freq_alpha_a) Rewrite.
5404         (compare_freq_numeric_d) Rewrite.
5405         (compare_freq_alpha_d) Rewrite.
5406         (calc_stats) Clean up mode, percentiles, max.
5407         (dump_statistics) Clean up spacing.
5408         
5409         * frequencies.g: Removed.
5410
5411         * var.h: (struct freq_tab) Change `data' to hash table.
5412
5413 Fri Dec 19 14:15:46 2003  Ben Pfaff  <blp@gnu.org>
5414
5415         * file-handle.h: Remove declaration of global variable `files',
5416         which wasn't used anywhere.
5417
5418         * postscript.c: (add_encoding) Remove superfluous cast.
5419         (line) Ditto.
5420
5421         * sfm-read.c: [linux] (bswap_int32) Drop ntohl() non-portable
5422         version.
5423
5424         * temporary.c: [0] (display_tree) Removed.
5425
5426 Fri Dec 19 14:13:04 2003  Ben Pfaff  <blp@gnu.org>
5427
5428         Implement a new random number generator based on the alleged RC4
5429         algorithm.
5430
5431         * expr-evl.c: (expr_evaluate) Use rng_get_double_normal() instead
5432         of rand_normal().
5433
5434         * random.c: [!HAVE_GOOD_RANDOM] (real_rand) Removed.
5435         [!HAVE_GOOD_RANDOM] (real_srand) Removed.
5436         (macro k) Removed.
5437         (static var V[]) Removed.
5438         (static var Y) Removed.
5439         (static var X2) Removed.
5440         (setup_randomize) Removed.
5441         (shuffle) Removed.
5442         (rand_uniform) Removed.
5443         (rand_normal) Removed.
5444         (struct rng) New structure.
5445         (rng_create) New function.
5446         (rng_destroy) New function.
5447         (swap_byte) New static function.
5448         (rng_seed) New function.
5449         (rng_get_bytes) New function.
5450         (rng_get_int) New function.
5451         (rng_get_unsigned) New function.
5452         (rng_get_double) New function.
5453         (rng_get_double_normal) New function.
5454         (pspp_rng) New function.
5455
5456         * random.h: Sync up to random.c.
5457
5458         * sample.c: (struct sample_trns) Make `frac' unsigned and a
5459         fraction of UINT_MAX, not 65536.
5460         (cmd_sample) Use rng_get_unsigned(), rng_get_double(), UINT_MAX
5461         fraction.
5462
5463         * vfm.c: (open_active_file) No need to call setup_randomize() any
5464         longer.
5465
5466 Fri Dec 19 12:05:56 2003  Ben Pfaff  <blp@gnu.org>
5467
5468         Change dictionary name indexes to use hash tables instead of AVL
5469         trees.
5470
5471         * crosstabs.q: (free_var_dict) Use hash tables.
5472         (crs_custom_tables) Ditto.
5473         (calc_general) Ditto.
5474         (compare_table_entry) Rewrite.
5475         (enum_var_values) Reorder parameters.  All references updated.
5476         Rewrite.
5477
5478         * get.c: (rename_variable) Use hash tables.
5479         (mtf_merge_dictionary) Ditto.
5480
5481         * glob.c: (init_glob) Use hash tables.
5482         (cmp_variable) Removed.
5483
5484         * means.q: (mns_custom_tables) Use hash tables.
5485
5486         * modify-vars.c: (rearrange_dict) Use hash tables.
5487
5488         * rename-vars.c: (cmd_rename_variables) Use hash tables.
5489
5490         * sfm-read.c: (read_header) Use hash tables.
5491         (read_variables) Ditto.
5492
5493         * temporary.c: (new_dictionary) Use hash tables.
5494         (save_dictionary) Ditto.
5495         (restore_dictionary) Ditto.
5496
5497         * var.h: (struct dictionary) Change AVL tree `var_by_name' into
5498         hash table `name_tab'.
5499
5500         * vars-atr.c: [DEBUGGING] (dump_one_var_node) Removed.
5501         [DEBUGGING] (dump_var_tree) Removed.
5502         (find_variable) Use hash tables.
5503         (find_dict_variable) Ditto.
5504         (common_init_stuff) Ditto.
5505         (rename_variable) Ditto.
5506         (clear_variable) Ditto.  Also, remove debug code.
5507         (dup_variable) Use hash tables.
5508
5509         * vars-prs.c: (fill_all_vars) Use hash tables.
5510         (is_dict_varname) Ditto.
5511         (parse_dict_variable) Ditto.
5512         
5513 Fri Dec 19 11:46:23 2003  Ben Pfaff  <blp@gnu.org>
5514
5515         Change value labels to use hash tables instead of AVL trees, and
5516         change value labels into an ADT.
5517
5518         * Makefile.am: (pspp_SOURCES) Add value-labels.c, value-labels.h.
5519         
5520         * value-labels.c: New file.
5521
5522         * value-labels.h: New file.
5523
5524         * apply-dict.c: (cmd_apply_dictionary) Use value label ADT.
5525         Get rid of a stupid use of goto.
5526
5527         * autorecode.c: (compare_alpha_value) Rewrite.
5528         (hash_alpha_value) Ditto.
5529         (compare_numeric_value) Rewrite.
5530         (hash_numeric_value) Ditto.
5531
5532         * frequencies.q: (dump_full) Use value label ADT.
5533
5534         * pfm-read.c: (read_value_label) Use value label ADT.
5535
5536         * pfm-write.c: (write_value_labels) Use value label ADT.
5537
5538         * sfm-read.c: (read_variables) Use value label ADT.
5539         (read_value_labels) Rewrite.
5540
5541         * sfm-write.c: (write_value_labels) Rewrite.
5542
5543         * sysfile-info.c: (cmd_sysfile_info) Use value label ADT.
5544         (display_variables) Ditto.
5545         (describe_variable) Ditto.
5546
5547         * t-test.q: (print_t_groups) Use value label ADT.
5548
5549         * temporary.c: (copy_variable) Use value label ADT.
5550         (free_dictionary) Ditto.
5551
5552         * val-labs.c: (verify_val_labs) Use value label ADT.
5553         (get_label) Ditto.
5554         (debug_print) Ditto.
5555         (val_lab_cmp) Removed.
5556         (inc_ref_count) Removed.
5557         (copy_value_labels) Removed.
5558
5559         * var.h: (struct value_label) Removed.
5560         (struct variable) Change AVL tree `val_lab' into hash table
5561         `val_labs'.
5562
5563         * vars-atr.c: (init_variable) Use value label ADT.
5564         (clear_variable) Ditto.
5565         (free_value_label) Removed.
5566         (free_val_lab) Removed.
5567         (get_val_lab) Removed.
5568         (compare_variables) New function.
5569         (hash_variable) New function.
5570
5571         * vfm.c: (dump_splits) Use value label ADT.
5572
5573 Fri Dec 19 11:18:11 2003  Ben Pfaff  <blp@gnu.org>
5574
5575         Add to the hash table interface.
5576
5577         * hash.c: (hsh_hash_bytes) Add assertion.
5578         (hsh_hash_string) Ditto.
5579         (hsh_clear) Ditto.
5580         (hsh_rehash) Ditto.
5581         (hsh_probe) Ditto.
5582         (hsh_create) Ditto.  Also make minimum `size'.
5583         (hsh_destroy) Rephrase.
5584         (sort_nulls_last) Removed.
5585         (not_null) New function.
5586         (hsh_data) Ditto.
5587         (comparison_helper) Ditto.
5588         (hsh_sort) Rewritten.
5589         (hsh_data_copy) New function.
5590         (hsh_sort_copy) Ditto.
5591         (hsh_insert) Ditto.
5592         (hsh_replace) Ditto.
5593         (hsh_hash_double) Ditto.
5594         (hsh_delete) Fix stupid bug.
5595         
5596 Thu Dec 18 12:27:03 WAST 2003 John Darrington <john@darrington.wattle.id.au>
5597         * added a calculation of the mode to FREQUENCIES
5598
5599 Wed Dec 17 12:53:01 WAST 2003 John Darrington <john@darrington.wattle.id.au>
5600
5601         * moved (un)defs of DEBUGGING to config.h
5602
5603 Mon Dec 15 21:35:59 2003  Ben Pfaff  <blp@gnu.org>
5604
5605         * groff-font.c: (add_kern) Fix indentation.
5606         (add_kern) Use & instead of % to take power-of-2 modulus.
5607         (font_get_kern_adjust) Likewise.
5608
5609 Fri Dec 12 23:54:37 2003  Ben Pfaff  <blp@gnu.org>
5610
5611         * autorecode.c: (recode) Replace stupid use of memcpy() by
5612         memberwise copy.
5613         (hash_alpha_value) Use hsh_hash_bytes().  Get rid of nasty casts.
5614         (hash_numeric_value) Ditto.
5615         (autorecode_proc_func) pool_strdup() was wrong here because the
5616         source string was not null-terminated.  Use new pool_strndup()
5617         instead.
5618
5619         * crosstabs.q: (enum_var_values) Remove superfluous and bizarre
5620         use of hsh_iterator_init().
5621
5622         * data-in.c: (parse_N) Initialize i->v->f.
5623
5624         * flip.c: (cmd_flip) Use memmove(), not memcpy(), to copy
5625         overlapping arrays.
5626
5627         * groff-font.c: Use power-of-2 hash table sizes, not prime.
5628         (groff_read_font) Don't call hsh_next_prime().  Don't call
5629         fclose(NULL).
5630         (static var hash) Remove `size_p', `max_used' members.
5631         (font_char_name_to_index) Don't call hsh_next_prime().  Use
5632         hsh_hash_string() instead of hashpjw(), & instead of %.
5633         (default_font) Don't call hsh_next_prime().
5634
5635         * pool.c: (pool_strndup) New function.
5636         (pool_strdup) Reimplement in terms of pool_strndup.
5637
5638         * postscript.c: (hash_font_entry) Use hsh_hash_string().  Get rid
5639         of nasty casts.
5640         (hash_ps_encoding) Use hsh_hash_string().
5641         (hash_ps_combo) Use hsh_hash_string(), hsh_hash_int().
5642         (hash_filename2font) Use hsh_hash_string().
5643
5644         * som.c: Add #include <stdlib.h>.
5645
5646         * tab.c: (tab_destroy) Don't set t->container after freeing `t'
5647         (by destroying its pool).
5648         
5649 Fri Dec 12 23:18:59 2003  Ben Pfaff  <blp@gnu.org>
5650
5651         Miscellaneous hash table code cleanup:
5652         
5653         * hash.h: (struct hsh_table) Moved into hash.c.
5654         (hsh_count) Ditto, and transformed into function.
5655         (hsh_compare_func) New typedef, used for defining otherwise-long
5656         function types here and in hash.c
5657         (hsh_hash_func) Ditto.
5658         (hsh_free_func) Ditto.
5659         
5660         * hash.c: (struct hsh_table) Renamed `n' to `used', `m' to `size',
5661         `table' to `entries'.  Removed `mp'.  All references updated.
5662         (hsh_clear) Don't shrink entries array; if the hash was this big
5663         once, it probably will be again.
5664         (hsh_rehash) Made static.
5665         (force_hsh_insert) Renamed hsh_force_insert.
5666         (force_hsh_find) Renamed hsh_force_find.
5667
5668         Made hash table sizes powers of 2, because that's fine with any
5669         reasonable hash function and because taking a power-of-2 modulus
5670         is faster than any other:
5671         
5672         (hsh_prime_tab) Removed;
5673         (hsh_next_prime) Ditto.
5674         (next_power_of_2) New function.
5675         (hsh_create) Use next_power_of_2.
5676         (hsh_rehash) Use & instead of %.
5677
5678         Cleaned up hsh_sort:
5679         
5680         (internal_comparison_fn) Removed.
5681         (sort_nulls_last) New function.
5682         (hsh_sort) Removed second parameter, switched to using the new
5683         quicksort() function from quicksort.h to avoid using nasty need
5684         for static variables with qsort().  All references updated.
5685
5686         Changed the hash functions offered, because there are better hash
5687         functions than the ones we had, and cleaned up the names to boot:
5688         
5689         * hash.c: (hashpjw_d) Removed.
5690         (hashpjw) Ditto.
5691         (hsh_hash_bytes) New function.
5692         (hsh_hash_string) New function.
5693         (hsh_hash_int) New function.
5694
5695         Improved the hash table iteration interface:
5696         
5697         * hash.h: (hsh_iterator_init) Removed.
5698         (struct hsh_iterator) Removed `init' member, change `next' to
5699         size_t.
5700
5701         * hash.c: (hsh_foreach) Removed.  All references updated to use
5702         hsh_first/hsh_next instead.
5703         (hsh_first) New function.  Notably, unlike hsh_foreach() it does
5704         not treat a null pointer as an empty hash table.
5705         (hsh_next) New function.
5706
5707         Made deletion possible, though slow:
5708
5709         * hash.c: (locate_matching_entry) New function.
5710         (hsh_find) Use locate_matching_entry().
5711         (hsh_delete) New function also using locate_matching_entry().
5712         (hsh_force_delete) New function.
5713
5714 Fri Dec 12 23:16:10 2003  Ben Pfaff  <blp@gnu.org>
5715
5716         * quicksort.c: New file implementing a sort routine with a
5717         interface better than qsort() because it passes a user-provided
5718         parameter to the sort routine.
5719
5720         * Makefile.am: Add quicksort.c, quicksort.h.
5721
5722 Fri Dec 12 13:31:58 2003  Ben Pfaff  <blp@gnu.org>
5723
5724         * All source files: Get rid of nasty special cases for Checker,
5725         which is pretty obsolete now.
5726
5727 Thu Dec 11 21:38:24 WST 2003 John Darrington <john@darrington.wattle.id.au>
5728
5729         * Fixed a bug apparent when using the FREQUENCIES command with the
5730         html driver.  The html driver was incorrectly trying to display 
5731         empty cells.
5732
5733 Sun Jan  2 21:40:13 2000  Ben Pfaff  <blp@gnu.org>
5734
5735         * Makefile.am: Reorganized.  Put locale dir in version.c instead
5736         of passing it to each compile command.  Only put local gmp libs in
5737         LD_ADD if not installed on system.  Remove `boast' target.
5738
5739         * All source files: struct and union typedefs eliminated.
5740         `sizeof type' replaced by `sizeof object' where practical.  Moved
5741         `unused' qualifiers from start to end of declarations for gcc
5742         2.7.2 compatibility.  Change `while (1)' to `for (;;)'.  Made
5743         assertions on pointers strictly compliant.  Removed _ prefixes on
5744         some function parameter names.
5745
5746         * alloc.c: New source file, containing these external linkage
5747         functions removed from common.c: xmalloc, xcalloc, xrealloc,
5748         xstrdup.
5749
5750         * arena.c: Removed.
5751         
5752         * arena.h: Removed.
5753
5754         * ascii.c: Migrated from arenas to pools.
5755         (struct ascii_driver_ext) ops[], box[], fonts[] changed from
5756         c_string to len_string.  All references changed.
5757         (ascii_option) Signature changed to comply to new output.c
5758         interface.
5759         (count_fancy_chars) Removed.
5760         (delineate) Removed support for rich text.
5761         (ascii_text_metrics) Ditto.
5762         (text_draw) Ditto.
5763         (output_shorts) Change `box', `off', `on' from c_string to
5764         len_string.  Change `remaining' from int to size_t.
5765         (ascii_close_page) Make page numbering less haphazard.
5766
5767         * autorecode.c: Migrate from arenas to pools.
5768
5769         * avl.c: Migrate from arenas to pools.  Synch from libavl 1.4.0.
5770
5771         * bitvector.h: New file containing these macros from misc.h:
5772         SET_BIT, CLEAR_BIT, SET_BIT_TO, TEST_BIT, BIT_INDEX.
5773
5774         * command.c: (struct command) cmd1, cmd2, cmd3 members changed to
5775         word[3].  ncmd removed.
5776         (var empty_string) Removed.
5777         (var cmd_table) Declaration updated.
5778         (var cmdtab) Removed.
5779         (cmp_command) Removed.
5780         (split_words) Rewritten to use strtok_r().
5781         (init_cmd_parser) Renamed cmd_init().  Rewritten.
5782         (find_command) Removed.
5783         (FILE_TYPE_okay) Rewritten.
5784         (cmd_parse) Rewritten.  Semantics of the return value of command
5785         handlers has changed: they must now return one of the new CMD_*
5786         enumerals, rather than a magic value.  This meant that all
5787         commands had to be modified, and they were.
5788         (figure_out_command) New function.
5789
5790         * command.def: Add CORRELATIONS, PEARSON CORRELATIONS.  Add
5791         #defines for INIT, INPU, etc.
5792
5793         * command.h: New CMD_* enum series.
5794         (cur_proc) Make const char *, not char *.
5795         (cmd_init) Prototype.
5796         (cmd_parse) Ditto.
5797
5798         * common.c: Removed.
5799
5800         * common.h: Removed.
5801
5802         * correlations.q: New file.
5803
5804         * crosstabs.q: Migrate from arenas to pools.  Migrate to new-style
5805         q2c.
5806         (custom_tables) Renamed crs_custom_tables().
5807         (custom_variables) Renamed crs_custom_variables().
5808         (calc_integer) Add in some `const' qualifiers.
5809         (table_value_missing) Change from a_string to len_string.
5810         (float_M_suffix) Change from a_string to len_string.
5811
5812         * data-in.c: Rewritten.  All references to
5813         parse_string_as_format() changed to data_in().
5814
5815         * data-in.h: New file.
5816
5817         * data-list.c: Change DLS_* from #define's to enums.  Move from
5818         rpd_msg() to tmsg().
5819         (RPD_ERR) New #define.
5820         (do_reading) Change dfm_push_cust() to dfm_push(), pop_cust() to
5821         dfm_pop().
5822         (read_from_data_list_fixed) Change from old
5823         parse_string_as_format() to new data_in().
5824         (read_from_data_list_free) Ditto.
5825         (read_from_data_list_list) Ditto.
5826         (cmd_repeating_data) Modify approach to checking for end of
5827         command.
5828         (rpd_msg) Removed.
5829         (rpd_parse_record) Change from old parse_string_as_format() to new
5830         data_in().  Change from old convert_format_to_string() to new
5831         data_out().
5832         (read_one_set_of_repetitions) Change dfm_push_cust() to
5833         dfm_push(), pop_cust() to dfm_pop().
5834
5835         * data-out.c: Rewritten.  All references to
5836         convert_format_to_string() changed to data_out().
5837
5838         * descript.q: Migrate to new q2c.
5839         (cmd_descriptives) Removed.
5840         (internal_cmd_descriptives) Renamed cmd_descriptives ().
5841         (custom_variables) Renamed dsc_custom_variables().
5842
5843         * dfm.c: (struct dfm_fhuser_ext) `ln' removed.  All references
5844         removed.
5845         (open_file_r) Initialize h->where.line_number.  Migrate to new
5846         struct string.
5847         (open_file_w) Initialize h->where.line_number.
5848         (read_record) Change from ext->ln to h->where.line_number.
5849         Migrate to struct string.
5850         (dfm_put_record) Rephrased.
5851         (dfm_push_cust) Renamed dfm_push(), rewritten.
5852         (dfm_pop) New function.
5853
5854         * error.c: All references updated.
5855         (glob var error_count) Renamed err_err_count.
5856         (glob var warning_count) Renamed err_warning_count.
5857         (glob var error_already_flagged) Renamed err_already_flagged.
5858         (glob var verbosity) Renamed err_verbosity.
5859         (glob var cust_fn) Removed.
5860         (glob var cust_ln) Removed.
5861         (static var file_loc) New.
5862         (static var nfile_loc) New.
5863         (static var mfile_loc) New.
5864         (tmsg) New function.
5865         (push_cust) Removed.
5866         (pop_cust) Removed.
5867         (msg) Rewritten.
5868         (static var terminating) Removed.
5869         (failure) Renamed err_failure().
5870         (hcf) Renamed err_hcf().
5871         (err_push_file_locator) New function.
5872         (err_pop_file_locator) New function.
5873         (err_location) New function.
5874         (check_error_count) Renamed err_check_count().
5875         (vmsg) Renamed err_vmsg().  Interface changed.
5876         (verbose_msg) Removed.
5877         (err_cond_fail) New function.
5878         (error_break) Renamed err_break().
5879
5880         * error.h: All references updated.
5881         (enum MSG_CLASS_COUNT) Renamed ERR_CLASS_COUNT.
5882         (enum ERR_CLASS_MASK, ERR_VERBOSITY_SHIFT, ERR_VERBOSITY_MASK)
5883         New.
5884         (struct file_locator) New.
5885         (struct error) New.
5886         (macro verbose_msg) Removed.
5887         (macro cond_fail) Removed.
5888
5889         * expr-opt.c: (evaluate_tree) sizeof(char) == 1.
5890
5891         * expr-prs.c: Reorganized.  All references updated.
5892         (exprtypename) Renamed expr_type_name().
5893         (typename) Renamed type_name().
5894         (free_expression) Renamed expr_free().
5895         (parse_expression) Renamed expr_parse().  Uses new type_check()
5896         function.
5897         (init_functab) Renamed init_func_tab().
5898         (type_check) New function.
5899         (parse_or) Rewritten to use new allocate_nonterminal() and
5900         append_nonterminal_arg() functions.
5901         (parse_and) Ditto.
5902         (parse_not) Ditto.
5903         (parse_rel) Ditto.  Also simplified logic.
5904         (parse_add) Ditto.
5905         (parse_mul) Ditto.
5906         (parse_neg) Ditto.
5907         (parse_exp) Ditto.
5908         (SYSMIS_func) Ditto.
5909         (VALUE_func) Rephrased.
5910         (CONCAT_func) Fix memory leak by replacing free by free_node on
5911         lossage.
5912         (generic_str_func) Ditto.
5913         (parse_function) Ditto.  Also rephrasings.  Uses bsearch() to find
5914         function.
5915         (allocate_nonterminal) New function.
5916         (append_nonterminal_arg) New function.
5917         (static func_tab[]) Now at file level.
5918         (cmp_func) Moved.
5919         (init_func_tab) Moved.  Now just uses qsort() to sort func_tab[].
5920
5921         * expr.h: (enum series OP_*) Moved to exprP.h.
5922         (OP_* defines) Ditto.
5923         (struct op_desc) Ditto.
5924         (global ops[]) Ditto.
5925         (struct num_con_node) Ditto.
5926         (struct str_con_node) Ditto.
5927         (struct var_node) Ditto.
5928         (struct lag_node) Ditto.
5929         (struct casenum_node) Ditto.
5930         (struct nonterm_node) Ditto.
5931         (union any_node) Members renamed.
5932         (struct sys_node) Removed.
5933         (struct val_node) Removed.
5934         (operator typedef) Removed.
5935         (typedef exprtype) Removed.
5936         (enum series EX_*) Moved to exprP.h.
5937         (struct expression) Ditto.  Also renamed a lot of the members.
5938         (PXP_* defines) Changed to enums.
5939         (free_node prototype) Moved to exprP.h.
5940
5941         * file-handle.h: (struct file_handle) New member `where'.
5942
5943         * file-handle.q: Migrated to new q2c format.
5944         (prepend_current_directory) Removed (dead code).
5945         (cmd_file_handle) Incorporated all of internal_cmd_file_handle().
5946         (fh_get_handle_by_filename) Removed dead code.
5947         Set new `where' member.
5948
5949         * file-type.c: (file_type_source_read) References to
5950         parse_string_as_format() changed to data_in().
5951         dfm_push_cust()/pop_cust() changed to dfm_push()/dfm_pop().
5952
5953         * filename.c: All references updated.
5954         (init_filename) Renamed fn_init().
5955         (expand_line) Removed.
5956         (macro EXPAND_LINE) Removed.
5957         (interp_vars) Renamed fn_interp_vars().  Now uses st_*() instead
5958         of custom functions.
5959         (gnu_getcwd) Renamed fn_get_cwd(), rewritten.
5960         (tilde_expand) Renamed fn_tilde_expand(), uses ds_*().
5961         (normalize_filename) Renamed fn_normalize().
5962         (search_path) Renamed fn_search_path(), rewritten.
5963         (prepend_dir) Renamed fn_prepend_dir().
5964         (blp_getenv) Renamed fn_getenv().
5965         (blp_dirname) Renamed fn_dirname().
5966         (fn_basename) New function, not used.
5967         (absolute_filename_p) Renamed fn_absolute_p().
5968         (is_special_filename) Renamed fn_special_p().
5969         (file_exists) Renamed fn_exists_p().
5970         (readlink_malloc) Renamed fn_readlink().
5971         (getenv_default) Renamed fn_getenv_default().
5972         (open_file) Renamed fn_open().
5973         (close_file) Renamed fn_close().
5974         (open_file_ext) Renamed fn_open_ext().
5975         (close_file_ext) Renamed fn_close_ext().
5976
5977         * font.h: Migrate from arenas to pools.
5978
5979         * format.c: (parse_format_specifier_name) Deal with ds_* strings.
5980
5981         * frequencies.g: Migrate from arenas to pools.
5982
5983         * frequencies.q: Migrate to new q2c version.  Migrate from arenas
5984         to pools.
5985
5986         * getline.c: All references updated.
5987         (global getl_buf) Changed from char * to struct string.
5988         (static getl_include_path) Ditto.
5989         (global getl_buf_len) Removed.
5990         (global getl_buf_size) Removed.
5991         (getl_include_path) Deal with new getl_buf, getl_include_path.
5992         (getl_uninitialize) New function.
5993         (getl_get_current_directory) Rewritten.
5994         (getl_clear_include_path) Rewritten.
5995         (getl_add_include_dir) Rewritten.
5996         (getl_add_file) Assertion fixed.
5997         (getl_add_virtual_file) Change initial value of `remaining_loops'
5998         from 2 to 1.
5999         (welcome) Rewritten.
6000         (handle_line_buffer) Make static.  Change logic to make
6001         getl_add_virtual_file() change sensible.  Use ds_*() strings.
6002         (getl_read_line) Use ds_*() strings.  Implement SET ECHO.
6003         (getl_close_file) Moved.
6004         (getl_location) New function.
6005
6006         * getline.h: All references updated.
6007         (macro curln) Removed.
6008         (macro curfn) Removed.
6009         (macro am_interactive) Renamed getl_am_interactive.
6010         (macro am_reading_script) Renamed getl_reading_script.
6011
6012         * glob.c: (global fmt_parse_ignore_error) Removed.
6013         (init_glob) Use locale_dir not LOCALEDIR.  Use feholdexcept() on
6014         systems that support it (C99).  Turn off SET ECHO by default.  No
6015         necessary julcal initialization anymore.
6016
6017         * groff-font.c: Migrate from arenas to pools.
6018         (groff_read_font) Use err_push_file_locator().
6019         (groff_read_DESC) Ditto.
6020         (font_msg) Use tmsg().
6021
6022         * hash.c: (hsh_sort) Fix debug code.
6023         [GLOBAL_DEBUGGING] Include stdio.h.
6024
6025         * hash.h: (macro force_hsh_insert) Rephrase.
6026
6027         * heap.c: Rewritten.
6028         
6029         * heap.h: Rewritten.
6030
6031         * html.c: (html_option) Change from outp_value to struct string.
6032         (postopen) Change from curfn to getl_location().
6033         (escape_string) Remove rich-text code.  Signature changed.
6034         (output_tab_table) Switch from a_string to struct len_string.
6035         Remove rich text support.
6036
6037         * lexer.c: All references updated.  Largely rewritten.  Major
6038         changes listed below.  Removed tagged quote support.  Adapted to
6039         struct string tokstr.
6040         (global tokstr) Changed to struct string.
6041         (global tokstr_size) Removed.
6042         (global tokstr_len) Removed.
6043         (global tokid) New.
6044         (global tokint) Removed.
6045         (global toklongstr) Removed.
6046         (C* defines) Removed.
6047         (static tbl[]) Removed.
6048         (static id[]) Removed.
6049         (static une[]) Removed.
6050         (discard_line) Renamed lex_discard_line().
6051         (get_entire_line) Renamed lex_entire_line().
6052         (get_rest_of_line) Renamed lex_rest_of_line().
6053         (get_dotted_rest_of_line) Merged into lex_rest_of_line().
6054         (make_hexit) Removed.
6055         (syntax_error) Renamed lex_error().  Return value removed.
6056         (get_token_representation) Renamed lex_token_representation().
6057         (putback) Renamed lex_put_back().
6058         (putfwd) Renamed lex_put_forward().
6059         (convert_negative_to_dash) Renamed lex_negative_to_dash().
6060         (set_prog) Renamed lex_set_prog().
6061         (init_lex) Renamed lex_init().
6062         (reset_eof) Renamed lex_reset_eof().
6063         (lookahead) Renamed lex_look_ahead().
6064         (check_id) Rewritten.
6065         (yylex) Renamed lex_get(), rewritten.
6066         (lex_end_of_command) New function.  Many commands were rephrased
6067         using this.
6068         (lex_integer_p) New function.  Replaces compare of tokint against
6069         NOT_LONG.
6070         (lex_integer) New function.  Replaces tokint.
6071         (match_tok) Renamed lex_match().
6072         (match_id) Renamed lex_match_id().
6073         (match_int) Renamed lex_match_int().
6074         (force_match_id) Renamed lex_force_match_id(), added return value.
6075         (force_match) Renamed lex_force_match(), added return value.
6076         (force_string) Renamed lex_force_string(), added return value.
6077         (force_int) Renamed lex_force_int(), added return value.
6078         (lex_id_match_len) New function.
6079         (id_match) Renamed lex_id_match(), rewritten.
6080         (get_line) Renamed lex_get_line().
6081         (preprocess_line) Renamed lex_preprocess_line().
6082         (tokname) Renamed lex_token_name().
6083         (bin_value_func) Removed.
6084         (oct_value_func) Removed.
6085         (hex_value_func) Removed.
6086         (unexpected_eof) New function.
6087         (convert_numeric_string_to_char_string) New function.
6088         (parse_string) Rewritten, signature changed.
6089         (add_tokstr_char) Removed.
6090         (add_tokstr_unsigned) Removed.
6091         (add_tokstr_string) Removed.
6092         (parse_tagged_quote) Removed.
6093         (skip_comment) Renamed lex_skip_comment().
6094
6095         * lexer.h: All references updated.
6096         (macro is_id1) Renamed CHAR_IS_ID1.
6097         (macro is_idn) Renamed CHAR_IS_IDN.
6098         (token names ID, NUM, STRING, STOP, ... WITH, EXP) Renamed with
6099         prefix T_: T_ID, T_NUM, T_STRING, T_STOP, ... T_WITH, T_EXP.
6100         (macro get_token) Removed.
6101         (macro id_match) Removed.
6102         (macro force_match_id) Removed.
6103         (macro force_match) Removed.
6104         (macro force_string) Removed.
6105         (macro force_int) Removed.
6106         (macro force_num) Removed.
6107         (macro force_id) Removed.
6108
6109         * lexerP.h: Removed.
6110
6111         * list.q: Migrated to new q2c format.
6112         (write_line) Deal with struct len_string.
6113         (write_varname) Ditto.
6114         (write_fallback_headers) Ditto.
6115
6116         * magic.c: New file, incorporating the following global variables
6117         previously in other files: endian, second_lowest_value.  And both
6118         of those are conditional on #define's.
6119
6120         * magic.h: New file, incorporating the following global variable
6121         declarations: endian, second_lowest_value, and the following macro
6122         declarations: NOT_DOUBLE, NOT_LONG, NOT_INT.
6123
6124         * main.c: Added declarations of pgmname, finished, curdate,
6125         start_interactive.
6126         (main) Call new parse_script() function.
6127         (parse_script) New function.
6128         (execute_command) New function.
6129         (dump_token) Removed.
6130         (handle_error) New function.
6131
6132         * matrix.c: New file.
6133
6134         * matrix.h: New file.
6135
6136         * matrix-data.c: Migrated from arenas to pools.
6137         (mget_token) Change from parse_string_as_format() to data_in().
6138
6139         * means.q: Migrate to new q2c.
6140         (custom_tables) Renamed mns_custom_tables().
6141         (custom_crossbreak) Renamed mns_custom_crossbreak().
6142         (custom_variables) Renamed mns_custom_variables().
6143
6144         * mis-val.c: (static var width) Changed from `int' to `size_t'.
6145         (parse_varnames) Prototype.
6146         (parse_numeric) Rephrasings.
6147         (parse_alpha) Adapt to new struct string tokstr.
6148
6149         * misc.c: (intlog10) Rewritten.
6150         (spacing) Removed.
6151         (ansi_rand) Renamed real_rand(), moved into random.c.
6152         (ansi_srand) Renamed real_srand(), moved into random.c.
6153         (setup_randomize) Moved to random.c.
6154         (rand_uniform) Ditto.
6155         (rand_normal) Ditto.
6156         (rand_simple) Ditto.
6157         (get_config_line) Removed.
6158         (reverse) Removed (dead code).
6159
6160         * misc.h: (macro SET_BIT) Moved to bitvector.h.
6161         (macro CLEAR_BIT) Ditto.
6162         (macro TEST_BIT) Ditto.
6163         (macro SET_BIT_TO) Ditto.
6164         (macro BIT_INDEX) Ditto.
6165
6166         * output.c: (outp_read_devices) Move to err_push_file_locator()
6167         from push_cust().  Use struct string.
6168         (expand_op_tokstr) Removed.
6169         (static var op_tokstr) Changed to struct string.
6170         (static var op_tokstr_size) Removed.
6171         (tokener) Rephrasings.  Use struct string.
6172         (parse_options) Use struct string.
6173         (destroy_driver) Fix assertion.
6174         (outp_get_paper_size) Move to err_push_file_locator().
6175         [0] Removed dead code.
6176         (outp_string_width) Move to len_string.
6177
6178         * output.h: Comment fixes.
6179         (TAG_* enum series) Removed.
6180         (struct outp_value) Removed.
6181         (enum OUTP_T_FANCY) Removed.
6182         (struct outp_text) `s' changed from a_string to len_string.
6183         (struct outp_class) `option' change arg 3 from outp_value to
6184         struct string.
6185
6186         * pfm-read.c: (corrupt_msg) Rewritten.
6187
6188         * pfm-write.c: (bufwrite) Fix assertion.
6189
6190         * pool.c: New file, reference version.
6191
6192         * pool.h: New file, reference version.
6193
6194         * postscript.c: (ps_font_sizes) Fix assertion.
6195         (ps_option) Change arg 3 from outp_value to struct string.
6196         Adapt to struct string.
6197         (macro output_line) Removed.
6198         (macro add_string) Removed.
6199         (output_encodings) Adapted to struct string.  Moved to
6200         err_push_file_locator().
6201         (find_encoding_file) Fix assertion.
6202         (read_ps_encodings) Move to err_push_file_locator().
6203         (postopen) Use getl_location() instead of curfn.
6204         (out_text_plain) Move to len_string.
6205         (text) Ditto.  Remove rich text support.
6206
6207         * print.c: (cmd_print) Remove now-unneeded resource cleanup code.
6208         (cmd_print_eject) Ditto.
6209         (cmd_write) Ditto.
6210         (internal_cmd_print) Now cleans up after itself.  Uses
6211         fh_parse_file_handle() now.
6212         (cmd_print_space) Use PXP_NUMERIC to type-check.
6213
6214         * q2c.c: Overhauled.  Removed _("") i18n support.  All references
6215         updated.  All output functions updated to handle structures rather
6216         than local or static variables.  Adapt to new PSPP lex_*()
6217         functions.
6218         (macro _) Removed.
6219         (macro N_) Removed.
6220         (macro MAX_N_SBC) Removed.
6221         (global bare) Removed.
6222         (enum STRING) Renamed T_STRING.
6223         (enum ID) Renamed T_ID.
6224         (get_buffer) Buffer size increased.
6225         (strlower) Renamed st_lower(), rephrased.
6226         (strupper) Renamed st_upper(), rephrased.
6227         (skip_ws) New function.
6228         (get_line) Don't special-case any types of lines (like those
6229         beginning with ! or $, for instance).
6230         (get_token) Renamed lex_get().  Rephrased.
6231         (static var `prefix') New.
6232         (parse) New function.
6233         (parse_setting) Minor rephrasing.
6234         (dump_specifier_vars) Ditto.
6235         (make_identifier) Put null terminator on identifier, duh.
6236         (dump_vars) Renamed dump_declarations().  Never indent.  Never
6237         static.  Output changed entirely.
6238         (dump_specifier_init) Rephrase.
6239         (dump_vars_init) No index variable needed.  Other modifications.
6240         (dump_parser) Don't parse command name.  Do dump functions instead
6241         of just code fragments.
6242         (dump_free) Dump function instead of code fragment.
6243         (recognize_directive) New function.
6244         (main) Use recognize_directive().  Don't rely on magic $ line
6245         beginning: instead, parse comments.  Update list of headers.
6246
6247         * random.c: New file, containing the following functions:
6248         real_rand(), real_srand(), setup_randomize, shuffle, rand_uniform,
6249         rand_normal, rand_simple.
6250
6251         * random.h: New file.
6252
6253         * recode.c: (cmd_recode) Merge internal_cmd_recode() into this
6254         function.  `max_src_width', `max_dst_width' changed to size_t.
6255         (internal_cmd_recode) Removed.
6256         (parse_dest_spec) Merge similar cases.
6257         (parse_src_spec) Add assertion.
6258
6259         * repeat.c: (recognize_keyword) New function.
6260         (internal_cmd_do_repeat) Parse and handle PRINT keyword on END
6261         REPEAT.  Improve recognition of END REPEAT (use
6262         recognize_keyword()).  Move from curfn to getl_location().  Use
6263         struct string.
6264                 
6265         (perform_DO_REPEAT_substitutions) Adapt to struct string.
6266
6267         * set.q: Adapt to new q2c.
6268         (cmd_set) Range-check some values better.
6269         (custom_blanks) Renamed stc_custom_blanks().
6270         (custom_length) Renamed stc_custom_length().
6271         (custom_results) Renamed stc_custom_results().
6272         (custom_seed) Renamed stc_custom_seed().
6273         (custom_width) Renamed stc_custom_width().
6274         (custom_format) Renamed stc_custom_format().
6275         (custom_journal) Renamed stc_custom_journal().
6276         (custom_color) Renamed stc_custom_color().
6277         (custom_listing) Renamed stc_custom_listing().
6278         (custom_disk) Renamed stc_custom_disk().
6279         (custom_log) Renamed stc_custom_log().
6280         (custom_rcolor) Renamed stc_custom_rcolor().
6281         (custom_viewlength) Renamed stc_custom_viewlength().
6282         (custom_workdev) Renamed stc_custom_workdev().
6283
6284         * settings.h: Not necessary to include format.h any longer.
6285
6286         * sfm-read.h: (macro bswap_int32) Moved here from sfmP.h.
6287         (corrupt_msg) Rewritten.
6288
6289         * sort.c: Adapt to rewritten heap ADT.
6290
6291         * str.c: (aa_strcpy) Removed.
6292         (ab_strcpy) Removed.
6293         (ac_strcpy) Removed.
6294         (ba_strcpy) Removed.
6295         (bb_strcpy) Removed.
6296         (ca_strcpy) Removed.
6297         (aa_strdup) Removed.
6298         (aa_strdupcpy) Removed.
6299         (ba_strdup) Removed.
6300         (sa_strdup) Removed.
6301         (memrev) Renamed mm_reverse().
6302         (memrmem) Renamed mm_find_reverse().
6303         (cmp_str) Renamed st_compare_pad().
6304         (strmaxcpy) Removed.
6305         (strbarepadcpy) Renamed st_bare_pad_copy(), signature changed.
6306         (strbarepadlencpy) Renamed st_bare_pad_len_copy(), signature
6307         changed.
6308         (strpadcpy) Renamed st_pad_copy(), signature changed.
6309         (blpstrset) Removed.
6310         (ds_create) New function.
6311         (ds_init) New function.
6312         (ds_replace) New function.
6313         (ds_destroy) New function.
6314         (ds_clear) New function.
6315         (ds_extend) New function.
6316         (ds_shrink) New function.
6317         (ds_truncate) New function.
6318         (ds_length) New function.
6319         (ds_size) New function.
6320         (ds_value) New function.
6321         (ds_end) New function.
6322         (ds_concat) New function.
6323         (ds_concat_buffer) New function.
6324         (ds_printf) New function.
6325         (ds_putchar) New function.
6326         (ds_getline) New function.
6327         (ds_get_config_line) New function derived from the old
6328         misc.c:get_config_line().
6329         (ls_create) New function.
6330         (ls_create_buffer) New function.
6331         (ls_init) New function.
6332         (ls_shallow_copy) New function.
6333         (ls_destroy) New function.
6334         (ls_null) New function.
6335         (ls_null_p) New function.
6336         (ls_empty_p) New function.
6337         (ls_length) New function.
6338         (ls_value) New function.
6339         (ls_end) New function.
6340
6341         * str.h: Reformatted.
6342         (struct a_string) Removed.
6343         (struct b_string) Removed.
6344         (struct c_string) Removed.
6345         (struct len_string) New.
6346         (struct string) New.
6347         (macro as_streq) Removed.
6348         (macro bs_streq) Removed.
6349         (macro cs_streq) Removed.
6350         (macro sa_streq) Removed.
6351         (macro sb_streq) Removed.
6352         [__GNUC__] (inline function ds_putchar) New function.
6353         [__GNUC__] (inline function ds_length) New function.
6354         [__GNUC__] (inline function ds_value) New function.
6355         [__GNUC__] (inline function ds_end) New function.
6356
6357         * sysfile-info.c: (cmd_sysfile_info) Rephrased.
6358         (display_vectors) Fix missing i18n.
6359
6360         * t-test.q: Migrate to new q2c.
6361
6362         * tab.c: Migrate from arenas to pools.
6363         (tab_create) Use struct len_string.
6364         (tab_realloc) Ditto.
6365         (text_format) Ditto.
6366         (tab_joint_text) Ditto.
6367         (tab_natural_width) Remove rich text support.
6368         (tab_natural_height) Ditto.
6369         (tab_output_text) Handle TAT_FIX.
6370         (tab_raw) Change arg from a_string to len_string.
6371         (tabi_driver) Fix assertion.  Use struct len_string.
6372         (render_strip) Use struct len_string.  Remove rich text support.
6373         Add `const' qualifiers.
6374
6375         * tab.h: (enum TAB_RICH) Remove.
6376         (enums TAB_COL_NONE, TAB_COL_DONE) New.  Where appropriate,
6377         SOM_COL_* updated to read TAB_COL_*.
6378         (struct tab_table) Change arena to pool.  Change a_string to
6379         len_string.
6380
6381         * temporary.c: (restore_dictionary) Rewrite Checker code.
6382
6383         * var.h: (macros MAX_SHORT_STRING, MIN_LONG_STRING, SYSMIS,
6384         LOWEST, HIGHEST) Moved here from common.h.
6385         (typedef any_trns) Removed.  All references changed to `struct
6386         trns_header'.
6387
6388         * vars-atr.c: (force_create_variable) Fix assertion.
6389         (force_dup_variable) Fix assertion.
6390         
6391 Thu Jun  3 18:40:42 1999  Ben Pfaff  <blp@gnu.org>
6392
6393         Using alphanumeric variables in functions under AGGREGATE
6394         segfaulted.  Fixed.  Thanks to Dr. Dirk Melcher
6395         <BZN-mdksh@t-online.de> for reporting this bug.
6396         
6397         * aggregate.c: (parse_aggregate_functions) When setting the
6398         FSTRING bit, also allocate memory for the `string' member of
6399         agr_next.
6400         (free_aggregate_functions) Free iter->string.  Don't use the
6401         non-function bits when indexing the array of functions.
6402         [DEBUGGING] (debug_print) Don't use the non-function bits when
6403         indexing the array of functions.        
6404
6405 Sun May 30 00:00:54 1999  Ben Pfaff  <blp@gnu.org>
6406
6407         Under certain circumstances, the final case would be omitted from
6408         the results of an AGGREGATE operation.  Fixed.  Thanks to Dr. Dirk
6409         Melcher <BZN-mdksh@t-online.de> for reporting this bug.
6410         
6411         * aggregate.c (agr_00x_end_func): Increment number of cases in
6412         sink before writing case.  For streams that keep track of how many
6413         cases there are based on this value, this means that the last case
6414         will be read in on the next stream read.
6415
6416 Sat May 29 22:03:31 1999  Ben Pfaff  <blp@gnu.org>
6417
6418         Undefined behavior was invoked by referencing a freed pointer.
6419         
6420         * vfm.c (memory_stream_write): Free pointer *after* checking for
6421         non-null status.
6422
6423 Sat May 29 22:02:22 1999  Ben Pfaff  <blp@gnu.org>
6424
6425         A wrong record size was displayed when paging the active file to
6426         disk.
6427         
6428         * vfm.c: (memory_stream_write) Fix off-by-one error.
6429
6430 Sat May 29 21:50:26 1999  Ben Pfaff  <blp@gnu.org>
6431
6432         Not having enough temporary space for sorting caused a core dump.
6433         Fixed.
6434         
6435         * sort.c: (allocate_cases) Initialize i.
6436
6437 Sat May 29 21:40:54 1999  Ben Pfaff  <blp@gnu.org>
6438
6439         Syntax errors in function descriptions on AGGREGATE caused core
6440         dumps.  Fixed.
6441         
6442         * aggregate.c (cmd_aggregate): Don't free agr_dict after calling
6443         free_aggregate_functions(), since that function already frees
6444         agr_dict.
6445         
6446 Sat May 29 21:06:10 1999  Ben Pfaff  <blp@gnu.org>
6447
6448         A null pointer was dereferenced, causing a core dump, when
6449         PERCENTILES was specified on FREQUENCIES.  This fixes the problem,
6450         but PSPP still doesn't calculate percentiles.  Thanks to Regnor
6451         Jernsletten <rjernsle@eunet.no> for reporting this problem.
6452         
6453         * arena.c: (arena_malloc) If the arena hasn't been initialized
6454         already, initialize it.
6455
6456 Sat May 29 20:47:29 1999  Ben Pfaff  <blp@gnu.org>
6457
6458         * Makefile.cygwin: New file supplied by Hankin <hankin@dunno.com>
6459         for compilation with Cygnus Windows B20.  Not used by other
6460         systems.
6461
6462 Sat May 29 20:36:04 1999  Ben Pfaff  <blp@gnu.org>
6463
6464         SORT always sorted in ascending order.  Fixed.  Thanks to Dr. Dirk
6465         Melcher <BZN-mdksh@t-online.de> for reporting this bug.
6466
6467         * sort.c: (compare_case_lists) Reverse sense of comparison if
6468         sorting in descending order.
6469         (compare_record) Ditto.
6470
6471 Tue Mar  9 13:18:54 1999  Ben Pfaff  <blp@gnu.org>
6472
6473         SPLIT FILE with a string variable caused a core dump.  Fixed.
6474
6475         * vfm.c: If the variable is a string then make a temporary value
6476         struct pointing to it.  The underlying problem is a lot bigger
6477         than this (see TODO) but this is a stopgap for the simple case at
6478         least.
6479         
6480 Tue Mar  9 13:15:53 1999  Ben Pfaff  <blp@gnu.org>
6481
6482         Nested INCLUDEs didn't work.  Fixed.
6483
6484         * getline.c: (getl_include) Set first_line to NULL in allocated
6485         structure.
6486
6487 Tue Mar  9 13:13:46 1999  Ben Pfaff  <blp@gnu.org>
6488
6489         The MATCH FILES procedure set the values of variables not present
6490         to 0.  It should have been SYSMIS.  This is now fixed.
6491
6492         * get.c: (mtf_delete_file_in_place) Replace 0.0 by SYSMIS.
6493
6494 Tue Mar  9 12:52:23 1999  Ben Pfaff  <blp@gnu.org>
6495
6496         The REMARK command was too aggressive about skipping lines.  It
6497         didn't like being the last command in a file.
6498
6499         * command.c: (cmd_remark) Call get_entire_line() instead of
6500         get_line().
6501
6502 Tue Mar  9 12:48:05 1999  Ben Pfaff  <blp@gnu.org>
6503
6504         Comment parsing wasn't consistent with the rest of the code in its
6505         idea of where one command ends and another starts.  This meant
6506         that sometimes commands would be mysteriously ignored.  Thanks to
6507         Dr. Dirk Melcher <BZN-mdksh@t-online.de> for reporting this bug.
6508          
6509         * command.c: (parse_cmd) Hand off comment parsing to new function
6510         skip_comment() in lexer.c.
6511         * lexer.c: (skip_comment) New function.
6512
6513 Wed Jan 20 20:22:07 1999  Ben Pfaff  <blp@gnu.org>
6514
6515         The TABLE subcommand on MATCH FILES worked only erratically at
6516         best.  This fixes it.  Thanks to Dr. Dirk Melcher
6517         <BZN-mdksh@t-online.de> for reporting this bug.
6518
6519         * get.c: (mtf_compare_BY_values) When comparing string values, a
6520         difference of 1 is still a difference :-)
6521         (mtf_processing) Inverted TABLE reading logic fixed.  Also don't
6522         advance TABLE files automatically when matched.  Comment fixes.
6523
6524 Tue Jan 19 22:32:31 1999  Ben Pfaff  <blp@gnu.org>
6525
6526         VARIABLE LABELS rejected a slash before the first variable
6527         specification, contradicting the documentation.  Thanks to Walter
6528         M. Gray <graywm@northernc.on.ca> for reporting this bug.
6529
6530         * var-labs.c: (cmd_variable_labels) Ignore a leading slash in
6531         command specification.
6532
6533 Tue Jan 19 22:29:54 1999  Ben Pfaff  <blp@gnu.org>
6534
6535         Because of an incorrect optimization in memory allocation,
6536         CROSSTABS sometimes segfaulted when asked to output multiple
6537         tables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
6538         reporting this bug.
6539
6540         * crosstabs.q: (postcalc) New variables maxcols, maxcells, which
6541         are passed to output_pivot_table() for its use.
6542         (output_pivot_table) Instead of assuming the number of columns is
6543         constant, keep track with maxcols.  In general mode, use maxcells
6544         to determine whether more matrix cells need to be allocated.    
6545
6546 Tue Jan 19 22:27:46 1999  Ben Pfaff  <blp@gnu.org>
6547
6548         CROSSTABS didn't display value labels for column and row
6549         variables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
6550         reporting this bug.
6551
6552         * crosstabs.q: (table_value_missing) If the specified value has a
6553         value label for this variable, then show it instead of the raw
6554         value.
6555         (display_dimensions) Delegate display of value_labels to
6556         table_value_missing.
6557
6558 Mon Jan 18 20:04:06 1999  Ben Pfaff  <blp@gnu.org>
6559
6560         WRITE didn't write line ends.  Fixed.  Thanks to Dr. Dirk Melcher
6561         <BZN-mdksh@t-online.de> for reporting this bug.
6562
6563         * print.c: (print_trns_proc) Write (CR/)LF if PRINT is used _or_
6564         if the file isn't declared as binary.
6565
6566 Mon Jan 18 19:56:45 1999  Ben Pfaff  <blp@gnu.org>
6567
6568         MATCH FILES corrupted memory and dumped core on some syntax
6569         errors.  Fixed.
6570
6571         * get.c: (cmd_match_files) Set file->handle to NULL before
6572         jumping to lossage.
6573         (mtf_free_file) Don't free a null dictionary.   
6574
6575 Mon Jan 18 19:27:57 1999  Ben Pfaff  <blp@gnu.org>
6576
6577         MATCH FILES should set numeric values not available to the
6578         system-missing value, not to 0.  Thanks to Dr. Dirk Melcher
6579         <BZN-mdksh@t-online.de> for reporting this bug.
6580
6581         * get.c: (mtf_processing) Set unused records to system-missing,
6582         not 0.
6583
6584 Mon Jan 18 15:06:46 1999  Ben Pfaff  <blp@gnu.org>
6585
6586         KEEP didn't work properly on the SAVE procedure.  Fixed.  Thanks
6587         to Ralf Geschke <ralf@kuerbis.org> for reporting this bug.
6588
6589         * temporary.c: (save_dictionary) Initialize var_by_name AVL tree
6590         in newly created dictionary, and add each copied variable to the
6591         tree.
6592  
6593 Mon Jan 18 15:04:48 1999  Ben Pfaff  <blp@gnu.org>
6594
6595         Memory leak fix.
6596         
6597         * get.c: (trim_dictionary) Free variable list for KEEP after
6598         finishing with it.
6599
6600 Mon Jan 18 12:57:36 1999  Ben Pfaff  <blp@gnu.org>
6601
6602         Some systems didn't like the way open_file was coded.  Thanks to
6603         Hankin <hankin@rogue.consultco.com> for pointing this out.
6604
6605         * filename.c: (open_file) Don't try to store stdin, stdout,
6606         stderr as part of an array, because that doesn't always work.
6607
6608 Mon Jan 18 12:53:27 1999  Ben Pfaff  <blp@gnu.org>
6609
6610         The SAVE procedure didn't save long string variables properly.
6611         Fixed by this patch.  Thanks to Hankin
6612         <hankin@rogue.consultco.com> for this patch.
6613         
6614         * sfm-write.c: (write_variable) Fix off-by-one error in writing
6615         out variable pad records.
6616
6617 Tue Jan  5 14:29:27 1999  Ben Pfaff  <blp@gnu.org>
6618
6619         Previously, if PRINT SPACE were given a negative argument, it
6620         would report an error, then spin in an (almost) infinite loop.
6621         This fixes that behavior.
6622
6623         * print.c: (print_space_trns_proc) After reporting a negative
6624         argument, set number of lines to print to 1.
6625
6626 Tue Jan  5 13:59:55 1999  Ben Pfaff  <blp@gnu.org>
6627
6628         SPSS 8.0 outputs some new record types in its system files, and it
6629         allows longer value labels.  Accept these system files.
6630
6631         * sfm-read.c: (sfm_read_dictionary) Ignore record type 7 subtype
6632         11 emitted by SPSS 8.0.
6633         
6634 Tue Jan  5 13:55:50 1999  Ben Pfaff  <blp@gnu.org>
6635
6636         The LIST procedure was too conservative in allocating space for
6637         buffers, which caused a bug that only showed up with very long
6638         output variables.  Thanks to Hankin <hankin@dunno.com> for this
6639         bug report.
6640
6641         * list.q: (determine_layout) Allocate 1022 bytes instead of 256.
6642
6643 Tue Jan  5 13:34:34 1999  Ben Pfaff  <blp@gnu.org>
6644
6645         Typo meant string format specifiers weren't checked properly.  I
6646         think that Hankin <hankin@dunno.com> sent me this report, but I'm
6647         willing to be corrected on this point.
6648  
6649         * format.c: (check_string_specifier) Fix obvious typo.  
6650
6651 Tue Jan  5 12:50:42 1999  Ben Pfaff  <blp@gnu.org>
6652
6653         Using $CASENUM in an expression didn't work.  Here's a fix.
6654         Thanks to Dirk Melcher <BZN-mdksh@t-online.de> for reporting this
6655         bug.
6656          
6657         * expr-evl.c: (evaluate_expression) Add OP_CASENUM case.
6658
6659         * expr-opt.c: (dump_node) OP_CASENUM is acceptable.
6660
6661 Tue Jan  5 12:47:48 1999  Ben Pfaff  <blp@gnu.org>
6662
6663         The changes in 0.2.1 to fix DATA LIST FREE parsing broke some
6664         other behavior, *sigh*.  This patch hopefully fixes that.  This
6665         time I've actually tested it.
6666
6667         Thanks to Hankin <hankin@dunno.com> for reporting this bug.
6668
6669         * data-list.c: (read_from_data_list_free,
6670         read_from_data_list_list) Call parse_string_as_format() directly
6671         without mucking around with the field width.
6672
6673 Tue Jan  5 12:31:19 1999  Ben Pfaff  <blp@gnu.org>
6674
6675         Occasionally, you may encounter a script that wants to be
6676         interpreted in interactive mode.  Make -i emulate this behavior to
6677         allow such scripts to be executed with PSPP.
6678
6679         Thanks to Hankin <hankin@dunno.com> for reporting this behavior.
6680
6681         * cmdline.c: (pre_syntax_message[]) Update -i description.
6682
6683         * lexer.c: (preprocess_line) When getl_interactive is 2 (i.e.,
6684         when -i is given on the command line) don't treat unindented lines
6685         as starting a new command.
6686
6687 Tue Jan  5 12:30:10 1999  Ben Pfaff  <blp@gnu.org>
6688
6689         In conjunction with egcs 1.1.1, Checker emits some bogus warnings,
6690         mostly caused by local initialized aggregates.  After egcs is
6691         fixed upstream these can be removed, but for now they're not a big
6692         deal.
6693         
6694         * ascii.c: (ascii_postopen_driver) Checker chokes on local
6695         initialized arrays.  Avoid this.
6696
6697         * sfm-write.c: (sfm_write_dictionary) Don't use a local
6698         initialized struct.
6699
6700 Tue Jan  5 12:07:24 1999  Ben Pfaff  <blp@gnu.org>
6701
6702         egcs 1.1.1 has some new warnings relative to gcc 2.8.1, which the
6703         following changes avoid.  Currently I compile sources with egcs
6704         1.1.1 and gcc 2.7.2.3 before sending them out.
6705
6706         * apply-dict.c: (apply_dict) Use new avl_traverser_init() macro.
6707         
6708         * ascii.c: (option_tab[]) Initialize all struct members.
6709
6710         * avl.h: (avl_traverser_init) New macro.
6711         
6712         * command.c: (DEFCMD, UNIMPL macros, cmd_table[]) Initialize all
6713         struct members.
6714
6715         * crosstabs.q: (enum_var_values) Use new hsh_iterator_init()
6716         macro.
6717
6718         * hash.c: Comment fix.
6719
6720         * hash.h: (hsh_iterator_init) New macro.
6721
6722         * html.c: (option_tab[]) Initialize all struct members.
6723
6724         * pfm-write.c: (write_value_labels) Use new avl_traverser_init()
6725         macro.
6726
6727         * postscript.c: (option_tab[]) Initialize all struct members.
6728         (output_encodings, preclose, dump_lines) Use new
6729         hsh_iterator_init() macro.
6730
6731         * sfm-write.c: (write_value_labels) Use new avl_traverser_init()
6732         macro.
6733
6734         * sysfile-info.c: (describe_variable) Use new avl_traverser_init()
6735         macro.
6736
6737 Thu Nov 19 12:32:45 1998  Ben Pfaff  <blp@gnu.org>
6738
6739         * data-in.c: Examined each of the parsing functions to make sure
6740         that they wouldn't dump core if they were passed a string of the
6741         wrong length, since now the DATA LIST FREE/LIST routines don't
6742         check for field width before passing it to the data parser.
6743         (parse_RBHEX, parse_AHEX) Reject odd length input.
6744         (parse_string_as_format) Reject input that's too short or too
6745         long.
6746
6747         * data-list.c: Before, the DATA LIST FREE/LIST routines would pad
6748         a field to its entire declared output width then pass it to the
6749         data-in parsing routines.  This contradicted the documented
6750         behavior.  This is fixed in these changes.  Thanks to Mark H. Wood
6751         <mwood@IUPUI.Edu>.  In addition, this fixes a few more details of
6752         free-format parsing that differed from SPSS.
6753         (cut_field) Commas and spaces are treated identically.  Returns
6754         the proper column instead of a fixed 1 value.
6755         (parse_field) Removed.
6756         (read_from_data_list_free, read_from_data_list_list) Call
6757         parse_string_as_format directly instead of parse_field.
6758
6759         * heap.c: (heap_delete) Stylistic fixes.
6760
6761 Sun Aug  9 11:12:13 1998  Ben Pfaff  <blp@gnu.org>
6762
6763         * loop.c: (loop_2_trns_proc) Formatting fix.
6764
6765         * sel-if.c: (cmd_filter) Set FILTER_before_TEMPORARY.
6766
6767         * var.h: (glob var FILTER_before_TEMPORARY) New global var.
6768
6769         * vfm.c: (macro FILTERED) New.
6770         (static var filter_var) New.
6771         (process_active_file_write_case) Use FILTERED.
6772         (setup_filter) Set filter_var.
6773         (close_active_file) Delete the filter if not
6774         FILTER_before_TEMPORARY.
6775         (procedure_write_case) Use FILTERED.
6776
6777 Sat Aug  8 00:20:14 1998  Ben Pfaff  <blp@gnu.org>
6778
6779         * crosstabs.q: Changed /PIVOT={ON,OFF} to /FORMAT={PIVOT,NOPIVOT}.
6780
6781         * data-in.c: (parse_day_count) Message fix.
6782         (parse_month) Style fix.
6783
6784         * data-list.c: (struct data_list_pgm) New member eof.
6785         (cmd_data_list) Init eof to 0.
6786         (do_reading) Implement the /END subcommand and read-past-eof
6787         checking.
6788
6789         * do-if.c: Include stdio.h when debugging.
6790         (cmd_else_if) Make sure the command is .-terminated.
6791
6792         * glob.c: (init_glob) Capitalize the command prompt.
6793
6794         * inpt-pgm.c: (end_case_trns_proc) Debugging message.
6795         (end_file_trns_proc) Debugging message.
6796
6797         * loop.c: (internal_cmd_loop) Make it work when there's no loop
6798         index!
6799         (loop_2_trns_proc) Enable MXLOOPS (why was this disabled?)
6800
6801         * main.c: (dump_token) Make kwtab[] const.
6802
6803         * set.q: Spelling, comment fixes.
6804
6805         * sysfile-info.c: (cmd_display) DISPLAY VECTORS not DISPLAY
6806         VECTOR.
6807
6808         * vars-prs.c: (fill_all_vars) Style fix.
6809
6810         * vfm.c: (index_to_varname) Return const.
6811
6812 Tue Aug  4 23:49:23 1998  Ben Pfaff  <blp@gnu.org>
6813
6814         * Changes in many source files for partial -ansi -pedantic and
6815         no-debugging compliance: Remove trailing common in enum
6816         declarations; add `unused' attributes; insert some appropriate
6817         casts.
6818
6819         * cmdline.c: (parse_command_line) Add new --testing-mode flag.
6820
6821         * command.c: (shell) Make static.
6822         (run_command) Make static.
6823
6824         * data-list.c: (dump_fixed_table) Remove use of local_strdup().
6825
6826         * dfm.c: (cmd_begin_data) I18n fix.
6827
6828         * error.c: (verbose_msg) Define if __STRICT_ANSI__.
6829
6830         * error.h: (macro verbose_msg) Define if __STRICT_ANSI__.
6831
6832         * expr-opt.c: (evaluate_tree) Don't initialize local arrays if
6833         __STRICT_ANSI__.
6834
6835         * file-handle.q: Don't prepend the source file directory name to
6836         the data file name.  (Ongoing issue.)
6837         (prepend_current_directory) Comment out.
6838         (internal_cmd_file_handle) Don't call prepend_current_directory().
6839         (fh_get_handle_by_filename) Ditto.
6840
6841         * filename.c: Append zero byte to readlink() return value.
6842
6843         * getline.c: (getl_read_line) I18n fix.
6844
6845         * lexer.h: Don't use gcc features if __STRICT_ANSI__.
6846
6847         * misc.h: Don't use gcc features if __STRICT_ANSI__.
6848
6849         * pfm-write.c: (bufwrite) Don't try to increment a void * pointer
6850         directly.
6851
6852         * postscript.c: (output_encodings) Don't use local_strdup().
6853         (postopen) Ditto.
6854
6855         * print.c: Don't use gcc features if __STRICT_ANSI__.
6856
6857         * q2c.c: (dump_vars) Don't put a , at the end of the last enum.
6858
6859         * recode.c: (parse_src_spec) Fully brace nested if's.
6860
6861         * set.q: (global var set_testing_mode) New var.
6862
6863 Wed Jul 29 22:01:44 1998  Ben Pfaff  <blp@gnu.org>
6864
6865         * ascii.c: Add some more `unused' attributes that only come into
6866         play when NDEBUG is defined.
6867         (ascii_close_page) Set s_len when reallocating s.
6868         
6869         * crosstabs.q: (delete_missing) New function.
6870         (output_pivot_table) Call delete_missing() if /MISSING=REPORT.
6871         (make_summary_table) Create summary table reallocable.
6872
6873         * postscript.c: Add more `unused' attributes as above.
6874
6875         * tab.c: (tab_create) [GLOBAL_DEBUGGING] Set reallocable member.
6876         (tab_realloc) [GLOBAL_DEBUGGING] Assert that table is reallocable.
6877          
6878         * tab.h: (struct tab_table) [GLOBAL_DEBUGGING] New `reallocable'
6879         member.
6880
6881         * var.h: (macro force_dup_variable) [!GLOBAL_DEBUGGING] Remove
6882         gratuitous space between parameter definition.
6883
6884         * vars-atr.c: Changed some assert(0)'s to abort()'s to prevent
6885         complaints about running off the end of functions with NDEBUG
6886         enabled.
6887
6888 Sun Jul  5 00:17:25 1998  Ben Pfaff  <blp@gnu.org>
6889
6890         * Several source files: Removed some PORTME notes when reflection
6891         revealed that ANSI forbids that sort of breakage.  Also, added
6892         lots of `unused' qualifiers here and there.
6893
6894         * aggregate.c: (accumulate_aggregate_info) Remove local var
6895         weighting that turned out not to be used.
6896
6897         * avl.c: Update to version 1.1.0.  Add unused specifier.
6898         (avl_destroy) Initialize ab to 0.  Comment fixes.  Cast return
6899         value to void *.
6900         (avl_probe) Replace some instances of 1 with +1 where appropriate.
6901         (avl_find) Cast return value to void *.
6902         (avl_delete) q doesn't need to be initialized at the beginning of
6903         the function.  Replace some instances of 1 with +1.
6904         (force_avl_delete) Renamed avl_force_delete, all references changed.
6905         (compare_ints) `param' marked unused.
6906         (print_int) `param' marked unused.
6907         (recurse_tree) Replace some instances of 1 with +1.
6908
6909         * avl.h: Update to version 1.1.0.  Only declares avl function
6910         types if not already declared.
6911         (AVL_MAX_HEIGHT) Only define if not already defined.
6912         (struct avl_node) New unused member char pad[2].
6913         [GLOBAL_DEBUGGING] Change conditionalization to NDEBUG instead.
6914         (force_avl_insert) Renamed avl_force_insert.
6915         (force_avl_delete) Renamed avl_force_delete.
6916
6917         * crosstabs.q: (struct table_entry) Put `freq' into a union with
6918         new member `data'.
6919         (struct crosstab) Add new member `ofs'.
6920         (glob var int_tab) Removed.
6921         (custom_tables) In integer mode, assign v[i] properly through the
6922         indirect var_dict.
6923         (custom_variables) Now p.crs.max == max + 1.
6924         [DEBUGGING] (debug_print) p.crs.min and p.crs.max are now ints.
6925         (precalc) Implement integer mode.
6926         (calc_integer) Implement integer mode.
6927         (compare_table_entry) Remove unused local variable `comparing'.
6928         (make_summary_table) Implement integer mode.
6929         (macro ns_rows) Implemented as static variable now.
6930         (several variables) Made static, from global.
6931         (output_pivot_table) Use table_value_missing() for column heads.
6932         Remove several unused local variables.  Implement integer mode
6933         table summing.  Count up ns_rows.
6934         (crosstabs_dim) Make columns wider when /MISSING=REPORT requested.
6935         (find_pivot_extent) Moved into find_pivot_extent_general; now just
6936         calls that function or find_pivot_extent_integer.
6937         (find_pivot_extent_integer) New function.
6938         (enum_var_values) Implemented for integer mode.
6939         (table_value_missing) New function.
6940         (display_dimensions) Call table_value_missing() for heads.
6941         (float_M_suffix) New function.
6942         (display_crosstabulation) Call table_value_missing() for row
6943         heads.  Handle missing values in /MISSING=REPORT mode.
6944         (calc_fisher) Remove unused var N.
6945         (calc_r) Remove unused var fact.
6946
6947         * data-list.c: (dump_fixed_table) Fix table dimensioning.
6948         (read_one_set_of_repetitions) Remove unused vars var_spec, column.
6949
6950         * data-out.c: (insert_commas) Remove unused var cp.
6951         (convert_CCx) Remove unused vars save_set_decimal,
6952         save_set_grouping.
6953
6954         * descript.q: (dump_z_table) Fix table dimensioning.
6955         (pre_calc) Remove unused var j.
6956         (display) Remove unused vars title, s.  Fix table dimensioning.
6957
6958         * expr-evl.c: Comment fixes.
6959
6960         * frequencies.q: (full_dim) New function.
6961         (dump_full) Fix table dimensioning.
6962         (condensed_dim) New function.
6963         (dump_condensed) Fix table dimensioning.
6964
6965         * get.c: (cmd_match_files) Remove unused var n_val.  Remove unused
6966         label winnage.
6967
6968         * html.c: (html_close_drive) Remove unused var i.
6969         (postopen) Remove unused vars title, curfn_len, cp.
6970         (preclose) Remove unused vars this, x.
6971
6972         * lexer.c: Comment fixes.
6973
6974         * matrix-data.c: (cmd_matrix_data) Remove unused var index.
6975
6976         * means.q: (custom_tables) Remove unused var m_dim.
6977
6978         * mis-val.c: Format fix.
6979
6980         * modify-vars.c: (cmd_modify_vars) Remove unused var new_dict.
6981
6982         * output.c: (outp_get_paper_size) Remove unused var cp.
6983
6984         * pfm-read.c: (read_float) Remove unused var save, unused label
6985         underflow.
6986         (read_variables) Remove unused vars cp, j.
6987         (read_value_label) Remove unused var j.
6988
6989         * pfm-write.c: (bufwrite) Remove unused var i.
6990
6991         * postscript.c: (ps_postopen_drive) Remove unused vars dev_info,
6992         fn.
6993         (output_encodings) Remove unused vars char_cp, n_output.
6994         (read_ps_encodings) Remove unused var ep.
6995         (postopen) Remove unused var title.
6996         (preclose) Remove unused var fp.
6997         (ps_open_page) Remove unused vars true, false, orientation,
6998         mirror_horz, mirror_vert, width, length.
6999         (ps_text_metrics) Remove unused var x.
7000
7001         * q2c.c: (find_symbol) Remove unused var y.
7002         (parse_setting) Remove unused parameter sbc, all references
7003         changed.
7004         (dump_parser) Remove unused var cp.
7005         (dump_free) Remove unused var i.
7006
7007         * set.q: (static vars args, n) Removed.
7008         (internal_cmd_gset) Removed.
7009
7010         * sfm-read.c: (sfm_read_dictionary) Removed unused var i.
7011         (read_machine_flt64_info) Removed unused var file_endian.
7012         (read_documents) Removed unused var i.
7013         (read_compressed_data) Removed unused parameter dict, all
7014         references changed.
7015
7016         * sfm-write.c: (bufwrite) Removed unused var i.
7017         (sfm_write_case) Removed unused var i.
7018
7019         * sort.c: (merge_once) Remove unused var t.
7020         (write_separate) #if 0 out as dead code.
7021
7022         * split-file.c: (cmd_split_file) Remove unused var i.
7023
7024         * sysfile-info.c: (sysfile_info_dim) New function.
7025         (cmd_sysfile_info) Fix table dimensioning.
7026         (variables_dim) New function.
7027         (display_variables) Fix table dimensioning.
7028         (describe_variable) Remove unused var prev_r.
7029
7030         * t-test.q: (z_postcalc) Removed.
7031         (pairs_calc) Remove unused var bad_weight.
7032         (postcalc) Remove unused vars dfn, dfd.
7033
7034         * tab.c: (tab_create) Set t->dim to NULL.
7035         (tab_dim) Make sure t->dim is NULL first.
7036         (tab_natural_width) Remove parameter `clamp'.
7037         (tab_value) Remove duplicate assertion for table.
7038         (tab_raw) New function.
7039         (nowrap_dim) New function.
7040         (wrap_dim) New function.
7041         (tab_output_text) Fix table dimensioning.
7042
7043         * tab.h: (tab_raw) New macro.
7044
7045         * val-labs.c: (get_label) Remove unused var type.
7046         (copy_value_labels) Remove unused var trav.
7047
7048         * var.h: (struct crosstab_proc) Completely changed.
7049
7050         * vars-prs.c: (parse_dict_variable) Remove unused var v.
7051
7052         * vfm.c: (open_active_file) Remove unused vars i, lp.
7053
7054         * weight.c: (weight_trns_proc) #if 0 out as dead code.
7055         
7056 Tue Jun  2 23:37:21 1998  Ben Pfaff  <blp@gnu.org>
7057
7058         * Makefile.am: Add apply-dict.c, flip.c.
7059
7060         * apply-dict.c: New file.
7061         
7062         * command.c: (struct command) Make cmd[] larger for CLEAR
7063         TRANSFORMATIONS command name.
7064         (parse_cmd) Make sure we're in a valid state before using it as an
7065         index.  Discard variables and reset state on invalid transitions.
7066         (cmd_clear_transformations) New function.
7067
7068         * command.def: Add APPLY DICTIONARY, CLEAR TRANSFORMATIONS, FLIP.
7069         Add unimplemented PRESERVE, RESTORE.
7070
7071         * file-handle.h: Include stddef.h.
7072
7073         * flip.c: New file.
7074         
7075         * pfm-read.c: (parse_value) Pad value label values with spaces,
7076         not nulls.
7077
7078         * sfm-read.c: (struct sfm_fhuser_ext) Add reference count.
7079         (sfm_close) Decrement reference count, make sure it's zero.
7080         (sfm_maybe_close) New function.
7081         (sfm_read_dictionary) Handle reference counts.
7082
7083         * vars-atr.c: (clear_default_dict) New function.
7084         (discard_variables) Use clear_default_dict().
7085
7086 Sun May 31 00:58:05 1998  Ben Pfaff  <blp@gnu.org>
7087
7088         * Makefile.am: Add pfm-write.c.
7089         (LDADD) Add the libgmp2 libraries.
7090
7091         * command.def: Define EXPORT.
7092
7093         * get.c: (cmd_export) New function.
7094         (export_write_case_func) New function.
7095
7096         * pfm-read.c: (static spss2ascii[]) Make it const.
7097
7098         * pfm-write.c: New file.
7099
7100         * sfm-write.c: Formatting, comment fixes.
7101
7102         * var.h: Comment fix.
7103
7104 Fri May 29 21:44:12 1998  Ben Pfaff  <blp@gnu.org>
7105
7106         * Makefile.am: Add pfm.h, pfm-read.c.
7107
7108         * command.def: IMPORT is now implemented.
7109
7110         * format.c: (glob var translate_fmt[]) New var.
7111
7112         * get.c: (enum GTSV_NONE) Renamed GTSV_OPT_NONE.
7113         (cmd_import) New function.
7114         (import_source_read) New function.
7115         (glob var import_source) New var.
7116
7117         * pfm-read.c: New file.
7118
7119         * pfm.h: New file.
7120         
7121         * sfm-read.c: (parse_format_spec) Local variable translate_fmt[]
7122         moved in format.c.
7123         (dump_dictionary) Disabled printing a couple of items.
7124
7125 Mon May 25 12:42:37 1998  Ben Pfaff  <blp@gnu.org>
7126
7127         * crosstabs.q: (postcalc) Call make_summary_table().
7128         (make_summary_table) New function.
7129         (insert_summary) New function.
7130         (display_dimensions) Remove some unnecessary arguments, all
7131         references changed.
7132         (output_pivot_table) Fix lots of problems with the risk table
7133         setup.
7134         (submit) Don't display an empty table.
7135         (display_risk) Fix order of arguments to calc_risk().
7136
7137         * glob.c: Always include assert.h and stdlib.h.
7138
7139         * output.h: (enum OUTP_T_JUST_FULL) Removed, all references
7140         removed.
7141
7142         * tab.c: (tab_create) Cosmetic changes.
7143
7144         * tab.h: (enum TAB_JUSTIFY) Removed, all references removed.
7145
7146 Sun May 24 22:39:23 1998  Ben Pfaff  <blp@gnu.org>
7147
7148         * tab.def: Removed.
7149
7150         * crosstabs.q: (output_pivot_table) Headers drawing and submission
7151         code simplified, moved into new function submit().
7152         (submit) New function.
7153         (crosstabs_dim) New function.
7154         (display_directional) Substitute variable names for %s where
7155         appropriate.
7156         (somers_d_v[], somers_d_ase[], somers_d_t[]) New static vars.
7157         (calc_symmetric) Initialize parameters only if non-NULL.
7158         Calculate Somers' d.
7159         (calc_directional) Calculate Somers' d (or copy it, really).
7160         Calculate eta.
7161
7162         * output.c: (outp_string_width) New function.
7163
7164         * postscript.c: (postopen) Calculate font widths based on the
7165         width of the zero '0' character, not the width of the space
7166         character.  Set paper-width and paper-length based on points, not
7167         device units.
7168         (ps_open_page) Fix page setup string for landscape mode.
7169
7170         * som.h: (struct som_dimension) Removed.
7171         (struct som_table_class) height, width members take int * not
7172         som_dimesion * now.
7173
7174         * tab.c: Many functions now have added parameter validation.
7175         (tab_height, tab_width) These functions were removed and merged
7176         into a single function tab_resize(), and all references changed.
7177         (tab_dim) Rewritten since the interface changed; reduced from
7178         hundreds of lines to two.  All callers were changed.  Currently
7179         most of them just use tab_natural_dimensions as their callback and
7180         await detailed translation of functionality.
7181         (tab_natural_width) New function.
7182         (tab_natural_height) New function.
7183         (tab_natural_dimensions) New function.  This is a callback
7184         function, not something that you'd want to call directly.
7185         (tab_nat_dim) Removed.
7186         (tabi_table) Allocates t->w and t->h.
7187         (tabi_driver) Inlined sum_columns()'s functionality.  Calls the
7188         dimensions callback.
7189         (evaluate_dimensions) Removed.
7190         (sum_columns) Removed.
7191
7192         * tab.h: (enum TAL_1THIN) Removed.
7193         (enum series t_*) Removed.
7194         (struct tab_table) Members trh, trv changed to unsigned char *
7195         from int *.  Member dim changed to a function pointer from a
7196         unsigned char *.  Member max_stack_height removed.  New members
7197         hr_tot, vr_tot.
7198         (macros tab_l, tab_r, tab_t, tab_b) New.
7199
7200 Sat May 23 23:22:13 1998  Ben Pfaff  <blp@gnu.org>
7201
7202         * ascii.c: (delineate) Assign last_space_nchars before skipping
7203         spaces, to fix right justification.
7204
7205         * crosstabs.q: (static vars risk, direct) New vars.
7206         (static var pearson_r) Removed.
7207         (glob var chisq_fisher) Made static.
7208         (static vars row_tot[], col_tot[]) Don't include grand total
7209         anymore.
7210         (static var grand_total) Renamed W, all references changed.
7211         (output_pivot_table) Only make `table' if num_cells != 0.  Make
7212         risk and directional tables.  Deal with grand total no longer part
7213         of col_tot[].  Free rows and cols after we're done with them.
7214         (display_risk) New function.
7215         (display_directional) New function.
7216         (clac_r) Rewritten so that it stores all its results into its
7217         arguments, so it can be used for Spearman's correlation too.
7218         (calc_symmetric) Added a t[] argument, all references changed.
7219         Calculates ASEs for tau-b, tau-c, gamma.  Calculates Spearman's r,
7220         Pearson's r, Cohen's kappa.
7221         (calc_risk) New function.
7222         (calc_directional) New function.
7223
7224         * som.c: (som_submit) Improved debugging code.
7225
7226         * stats.c: (hypercube) New function.
7227         (cube) New function.
7228         (sqr) New function.
7229         (normal_sig) Went back to old implementation, which actually
7230         worked.
7231
7232         * stats.h: (macros square, cube, hypercube) Removed.  The
7233         equivalent functions in stats.c are inlined here; all references
7234         to square changed to sqr.
7235
7236 Fri May 22 00:03:41 1998  Ben Pfaff  <blp@gnu.org>
7237
7238         * crosstabs.q: (N_SYMMETRIC) New define.
7239         (postcalc) Disable debug printing.
7240         (static vars chisq_fisher, pearson_r) New.
7241         (output_pivot_table) Add support for symmetric measures.  Add
7242         chi-square output of exact sigs.
7243         (display_chisq) Rewritten.
7244         (display_symmetric) New function.
7245         (gamma_int) New function.
7246         (Pr) New function.
7247         (swap) New function.
7248         (calc_fisher) New function.
7249         (calc_chisq) Check boundary conditions better. Calculate Yates,
7250         Fisher, Mantel-Haenszel tests.
7251         (calc_r) New function.
7252         (calc_symmetric) New function.
7253
7254         * stats.c: (normal_sig) Rewritten with new algorithm.  Renamed
7255         from calc_normal.
7256         (chisq_sig) Better boundary conditions.  Renamed from
7257         calc_significance.
7258
7259         * tab.h: (struct tab_table) New member cf.
7260
7261         * tab.c: (tab_create) Set cf.
7262         (tab_width) New function.
7263         (tab_realloc) Handle cf.
7264         (tab_vline) Handle cf.
7265         (tab_hline) Handle cf.
7266         (tab_box) Handle cf.
7267         (tab_value) Handle cf.
7268         (tab_float) Handle cf.
7269         (tab_text) Handle cf.
7270         (tab_joint_text) Handle cf.
7271         (tab_offset) Handle cf.
7272         (tab_next_row) Handle cf.
7273         (evaluate_dimensions) Handle cf.
7274         (render_strip) Handle cf.
7275
7276 Wed May 20 00:03:59 1998  Ben Pfaff  <blp@gnu.org>
7277
7278         * crosstabs.q: (postcalc) New vars row_tot, col_tot, pass them to
7279         output_pivot_table().
7280         (output_pivot_table) Moved lots of local variables outside and
7281         made them static.  Add beginnings of chi-square statistic
7282         support.  Now column and row totals aren't in the main matrix.
7283         Always zero out any leftover rows & columns after we're done with
7284         the table entries.  Move all output stuff into
7285         display_dimensions(), display_crosstabs(), display_chisq().
7286         (display_dimensions) New function.
7287         (display_crosstabulation) New function.
7288         (display_chisq) New function.
7289         (calc_chisq) Implemented Pearson and likelihood-ratio chisquares.
7290
7291         * frequencies.q: (dump_full, dump_condensed) Remove tab_null()
7292         references, simplify logic.
7293
7294         * postscript.c: Remove scale, translate-x, translate-y,
7295         mirror-horz, mirror-vert, rotate-180 options.
7296         (struct ps_driver_ext) Remove scale, translate_x, translate_y.
7297         All references deleted.
7298         (macro YT) New macro.
7299         (array option_tab[]) Removed options.
7300         (ps_option) Removed options.
7301         (ps_open_page) Write page setup explicitly to output file, without
7302         using now-deleted BP function.
7303         (macro dump_line) Use YT().
7304         (macro dump_thick_line) Use YT().
7305         (draw_headers) Use YT().
7306         (switch_font) Reorder arguments to SF function.
7307         (write_text) Use YT().
7308
7309         * sfm-read.c: (sfm_read_case) Don't attempt to read variables that
7310         have get.fv == -1.
7311
7312         * sysfile-info.c: (describe_variables) Don't use tab_nulls().
7313
7314         * tab.c: (tab_create) Initialize t->ct to zeros.  Remove
7315         null-debugging code.
7316         (tab_realloc) Remove null-debugging code.  Initialize new regions
7317         of t->ct to zeros.
7318         (tab_vline) Support offsets.
7319         (tab_hline) Support offsets.
7320         (tab_box) Support offsets.
7321         (tab_null) Removed.
7322         (tab_nulls) Removed.
7323         (tab_row) Removed.
7324         (tab_col) Removed.
7325         (evaluate_dimensions) Remove null-debugging code.  Understand
7326         TAB_EMPTY attribute.  Assert that text.s.s is always non-NULL if
7327         TAB_EMPTY not present.
7328
7329         * tab.h: New cell attribute TAB_EMPTY.
7330         (macros tab_nr, tab_nc, tab_row, tab_col) New.
7331
7332         * vars-atr.c: (init_variable) Set get.fv to -1 so that GET doesn't
7333         try to read them from system files.
7334
7335         * vfm.c: (dump_splits) Don't call tab_null().   
7336
7337 Sat May 16 19:36:55 1998  Ben Pfaff  <blp@gnu.org>
7338
7339         * crosstabs.q: (struct crosstab) Added `missing' member.
7340         (custom_tables) Init missing.
7341         (calc_general) Handle missing values.
7342         (calc_chisq) New function.
7343         (output_pivot_table) Start work on chi-square output.  Update for
7344         new tab offset support functions.  Shorten statistic names.
7345
7346         * Several files: add in more `const's to placate gcc's warnings.
7347
7348         * tab.h: (struct tab_table) Add col_ofs, row_ofs members.  Comment
7349         fixes.
7350
7351         * tab.c: (tab_height, tab_realloc, tab_vline, tab_hline, tab_box,
7352         tab_null, tab_nulls, tab_value, tab_float, tab_text,
7353         tab_joint_text) Add col_ofs and row_ofs support.
7354         (tab_offset) New function.
7355         (tab_next_row) New function.
7356         (tab_row) New function.
7357         (tab_col) New function.
7358         (tabi_table) Add col_ofs and row_ofs support.
7359
7360         * vars-atr.c: (is_system_missing) New function.
7361
7362 Tue May 12 16:14:30 1998  Ben Pfaff  <blp@gnu.org>
7363
7364         * crosstabs.q: Expanded subcommand names RESID --> RESIDUAL, etc.
7365         (static var no_cells) Removed.
7366         (static var num_cells) New.
7367         (static var expected) New.
7368         (static var cells[]) New.
7369         (internal_cmd_crosstabs) Deal with new variables.
7370         (postcalc) Removed most of the meat and put it in new function
7371         output_pivot_table().
7372         (output_pivot_table) Calculates and outputs an entire pivot table.
7373
7374         * postscript.c: (postopen) Fix problems with free()ing addresses
7375         not obtained from malloc().
7376
7377         * som.c: (som_submit) Add assertion.
7378
7379         * sysfile-info.c: (describe_variable) Use new tab_nulls()
7380         function.
7381
7382         * tab.c: (static var tab_names[]) New.
7383         (tab_realloc) -1 for nc or nr indicates no change.
7384         (tab_nulls) New function.
7385         (tab_dim) Use tab_names[].
7386         (tabi_cumulate) Don't include bottom or right headers.  Furrfu.
7387         (evaluate_dimensions) Don't terminate on uninited cells, just put
7388         an X in them and emit a notice.  Use tab_names[].
7389
7390         * tab.h: Move bits into tab.def.
7391
7392         * tab.def: New.  Don't try to declare tab_table_class because then
7393         som.h has to be included.       
7394         
7395 Thu May  7 22:55:04 1998  Ben Pfaff  <blp@gnu.org>
7396
7397         * command.def: New file, contains all the command definitions
7398         previously included bodily in command.c.
7399
7400         * format.def: New file, contains all of the format definitions
7401         previously split across format.h, format.c, and sfm-write.c.
7402
7403         * lexer.h: Renamed from tokens.h in order to match corresponding
7404         .c file name.
7405
7406         * lexerP.h: Moved some rarely used functions exported by lexer.c
7407         into here.
7408
7409         * Makefile.am: Commemorate renamed files.
7410         (EXTRA_DIST) Add command.def, format.def.
7411
7412         * command.c: [0] (walk_cmdtable_func) Removed.
7413
7414         * crosstabs.q: (postcalc) Made it work and print out matrices
7415         proving it.
7416         (enum_column_values) Renamed enum_var_values, generalized for any
7417         variable.
7418
7419         * format.h: (struct fmt_desc) New member `spss'.
7420
7421         * q2c.c: (main) Generated code includes lexer.h instead of
7422         tokens.h.
7423
7424         * sfm-write.c: (write_format_spec) Use new spss member of fmt_spec
7425         instead of an independent translation table.
7426
7427 Tue May  5 13:19:03 1998  Ben Pfaff  <blp@gnu.org>
7428
7429         * Lots of source files: Added const to declarations.
7430
7431         * aggregate.c: (parse_aggregate_function) Rename inner i to j.
7432         
7433         * arena.c: (arena_clear) Set prev pointer to null when done.
7434
7435         * ascii.c: (ascii_option) Rename index as indx.
7436
7437         * avl.c: This is now a separate library called libavl.
7438         (xmalloc) Make static.
7439         (avl_probe) Step A7 can use the cache instead of an explicit
7440         compare.
7441         (avl_delete) Don't maintain a q pointer because it's always
7442         available in the pointer stack.  Comment fix.
7443
7444         * avl.h: This is now a separate library called libavl.
7445
7446         * command.c: (cmd_table[]) Remove spurious trailing "".
7447
7448         * common.h: Only include random() fix if this system needs it.
7449
7450         * crosstabs.q: Include alloca headers.
7451         (n_sorted_tab) New global var.
7452         (postcalc) Mostly rewritten.
7453         (find_pivot_extent) Rewritten.
7454         (enum_column_values) Rewritten.
7455
7456         * data-out.c: (convert_F) Rename inner n as n_spaces.
7457
7458         * error.c: (dump_message) Don't have an outer var i.
7459
7460         * file-handle.q: (static var f) Removed.  All references removed.
7461         (internal_cmd_file_handle) Uses a local variable instead of f.
7462
7463         * get.c: (trim_dictionary) Change scope of i, i1, i2.
7464         (cmd_match_files) Don't strcpy tokstr into sbc (why was this ever
7465         done?)
7466
7467         * getline.h: Declare getl_history as extern.  Reported by
7468         palme@uni-wuppertal.de (Hubert Palme).
7469
7470         * postscript.c: (postopen) Some large mods for constness.
7471
7472         * recode.c: Remove spurious copyrights since PSPP is owned by FSF
7473         anyway.
7474
7475 Fri Apr 24 12:52:47 1998  Ben Pfaff  <blp@gnu.org>
7476
7477         * Makefile.am: Rename BUILT_SOURCES to q_sources, all references
7478         changed.  Add avl.c, avl.h to pspp_SOURCES.  Remove avllib from
7479         LDADD.
7480
7481         * avl.c, avl.h: New files.  These form a clean-room
7482         reimplementation of avllib.  Iterative algorithms are used in
7483         place of recursive ones, so there is no resemblance in the code.
7484
7485         * Lots of headers: Don't include other headers by default.
7486
7487         * Lots of source files: Explicitly include all needed headers.
7488
7489         * arena.c: (arena_clear) New function.
7490
7491         * crosstabs.q: (ROW_VAR, COL_VAR) New enums.
7492         (static var ar) Removed.
7493         (staitc vars ar_tc, ar_col) New.
7494         (cmd_crosstabs) Destroy the arenas.
7495         (internal_cmd_crosstabs) Create the arenas.
7496         (precalc) Don't need a free function for the hash.
7497         (calc_general) Make sure to zero out the trailer on the key data
7498         before inserting.
7499         (print_table_entries) Updated.
7500         (postcalc) Worked on actually implementing.
7501         (find_pivot_extent) New function.
7502         (compare_value) New function.
7503         (enum_column_values) New function.
7504
7505         * data-in.c: (parse_month) Make local array `static const'.
7506         
7507         * data-out.c: (convert_date) Make local array `static const'.
7508         (convert_WKDAY) Same.
7509         (convert_MONTH) Same.
7510
7511         * frequencies.q: (postprocess_freq_tab) avl_walk_inorder() has
7512         been renamed to avl_walk().
7513         
7514         * hash.c: Rewritten more efficiently.
7515
7516         * hash.h: Add attribute const to hsh_next_prime declaration.
7517
7518         * lexer.c: (id_match) Make arguments const.
7519
7520         * postscript.c: (ps_postopen_driver) Make default fonts the
7521         Helvetica family.
7522
7523         * q2c.c: (main) Generated code needs stdlib.h.
7524
7525         * sfm-write.c: (write_value_labels) An avl_traverser needs to be
7526         initialized to 0 now, not to NULL.  All other references to
7527         avl_traverser were updated in the same way.
7528
7529         * tokens.h: Macro version of id_match updated to use const
7530         properly.
7531
7532         * val-labs.c: (inc_ref_count) New function.
7533         (copy_value_labels) Simply through use of new avl_copy() function.
7534
7535 Wed Apr 15 13:01:58 1998  Ben Pfaff  <blp@gnu.org>
7536
7537         * crosstabs.q: Probably doesn't compile.  New PIVOT subcommand.
7538         (postcalc) Worked on this.
7539
7540         * postscript.c: (OPO_DOUBLE_LINE) New enum.
7541         (struct ps_driver_ext) New line_width_thick member.
7542         (ps_preopen_drive) Init line_width_thick.
7543         (option_tab[]) Add line-* options.
7544         (ps_option) Parse line-* options.
7545         (postopen) Add line_width_thick support.  Strip leading spaces on
7546         prologue output lines.
7547         (ps_open_page) Include line_width_thick in output.
7548         (macro dump_thick_line) New.
7549         (dump_fancy_line) Support thick lines as well as double lines.
7550
7551 Tue Apr 14 00:50:08 1998  Ben Pfaff  <blp@gnu.org>
7552
7553         * Makefile.am: Add crosstabs.c to BUILT_SOURCES.  Add crosstabs.q
7554         to pspp_SOURCES.  Add crosstabs.q to EXTRA_DIST.
7555
7556         * Many source files: Rename `options' to `pv_opts' as appropriate.
7557
7558         * command.c: (static var cmd_table[]) Add CROSSTABS command.
7559
7560         * common.c: (xcalloc) New function.
7561
7562         * crosstabs.q: New file.  Not finished yet, though.
7563                 
7564         * data-list.c: Comment fix.
7565
7566         * error.c: Remove some old Checker cruft.
7567
7568         * frequencies.q: (dump_full) Cumulate valid percent instead of
7569         regular percent.
7570
7571         * getline.c: Comment fix.
7572
7573         * hash.c: Comment fixes.
7574
7575         * hash.h: (struct hsh_table) Make hash functions return unsigned
7576         instead of int to avoid problems with taking the modulo of
7577         negative return values.  All references changed.
7578
7579         * misc.c: (intlog10) Make its table static const instead of auto.
7580
7581         * sfm-read.c: (read_header) Make `prefix' static const instead of
7582         auto.
7583
7584         * var.h: (union value) Add member `hash'.
7585         (struct variable) Rename prv_index as `foo'--all references
7586         changed.  Reorder.
7587         (typedef pv_opts) Removed.  All references changed.
7588
7589         * vars-prs.c: (parse_variables) Message fixes.
7590         
7591 Mon Mar  9 15:35:08 1998  Ben Pfaff  <blp@gnu.org>
7592
7593         * get.c: (cmd_match_files) Don't reverse the order of FILEs as
7594         they are being inserted.  Don't check for BY variables of
7595         different types.  Discard variables if the active file isn't
7596         included in the merge.
7597         (mtf_processing) Essentially rewritten.
7598         (mtf_merge_dictionary) Check for master/slave variables of
7599         different types/widths.
7600
7601         * vfm.c: (static var not_canceled) New var.
7602         (process_active_file) Don't call vfm_source->read() if
7603         there's no vfm-source.  Initialize not_canceled.
7604         (process_active_file_write_case) Honor and update not_canceled.
7605         (prepare_for_writing) Rollback changes from yesterday, they were
7606         wrong.
7607         (close_active_file) Don't destroy vfm_source unless it exists.
7608         
7609 Mon Mar  9 00:56:16 1998  Ben Pfaff  <blp@gnu.org>
7610
7611         * Lots of source files: Added { } around nested if/else constructs
7612         to avoid new gcc 2.8 warnings.
7613
7614         * data-in.c: (parse_Z) Declare `int' type explicitly.
7615         (convert_Z) Ditto.
7616
7617         * get.c: (struct mtf_file) Add prev, next_min, by, input members.
7618         (cmd_match_files) Initialize mtf_by_values.  Manage by, input,
7619         prev members.  Put TABLEs at the end of the chain and FILEs at the
7620         beginning.  Don't allow the active file in STATE_INIT.  Use proper
7621         `seen' value for the active file.  Fill out the by members and
7622         make sure they're of consistent type.  Do the actual merge
7623         operation.
7624         (mtf_processing_finish) New function.
7625         (var_type_description) New function.
7626         (mtf_free_file) New function.
7627         (mtf_free) Rewritten.
7628         (mtf_delete_file_in_place) New function.
7629         (mtf_read_nonactive_records) New function.
7630         (mtf_compare_BY_values) New function.
7631         (static var mtf_seq_no) New var.
7632         (mtf_processing) New function.
7633         (mtf_merge_dictionary) Assign nval members for the system file
7634         dictionary.  Assign fv values for its variables.  Point each slave
7635         variable to the corresponding master variable.
7636
7637         * hash.c: Include str.h.
7638
7639         * mis-val.c: (copy_missing_values) src arg is const.
7640
7641         * misc.c: (spacing) Make `max' var explicitly int.
7642
7643         * sfm-read.c: (dump_dictionary) Message reformatting.
7644         (sfm_read_case) Add assertion.
7645
7646         * sort.c: Esthetic fixes.
7647
7648         * var.h: (struct match_files_proc) New struct.
7649         (struct variable) Add private data match_files_proc.
7650
7651         * vars-atr.c: (delete_variable) Implement.  Add argument for the
7652         dictionary that owning the variable.
7653         (dup_variable) Add assertion.
7654
7655         * vfm.c: Comment fixes, hopefully the comments are correct now.
7656         (process_active_file) New function.
7657         (process_active_file_write_case) New function.
7658         (process_active_file_output_case) New function.
7659         (prepare_for_writing) Use temp_dict->nval for vfm_info, not
7660         default_dict.nval.
7661         (write_case) Renamed procedure_write_case().  Now write_case is a
7662         pointer to a function.  Style fixes.
7663         
7664 1998-03-05  Ben Pfaff  <blp@gnu.org>
7665
7666         * Makefile.am: (q2c) Link with libmisc.
7667         (version.c) Define default_config_path, include_path,
7668         groff_font_path.
7669
7670         * ascii.c: (ascii_postopen_driver) When the default newline string
7671         is requested, open file in text mode.  Suggested by
7672         palme@uni-wuppertal.de (Hubert Palme).
7673         (static vars line_buf, line_p) Change from char * to unsigned char
7674         *.
7675         (ascii_close_page) char * to unsigned char *.
7676
7677         * cmdline.c: (parse_command_line) Implement -r option by
7678         prepending ~/.pspp/rc to the list of files to process.
7679
7680         * command.c: (cmd_remark) Reset getl_prompt to the standard prompt
7681         before pulling in a final line.
7682         (null_func, null_int_func) Removed (dead code).
7683
7684         * descript.q: (display) Calculate width of variable name column
7685         properly.  Calculate number of valid cases properly.  Reported by
7686         palme@uni-wuppertal.de (Hubert Palme).
7687
7688         * filename.c: (init_filename) Use default_config_path instead of
7689         now obsolete CONFIG_PATH.
7690
7691         * getline.c: (getl_initialize) Use include_path instead of now
7692         obsolete INCLUDE_PATH.
7693         (getl_add_file) New argument `where'.  All references changed.
7694
7695         * groff.c: (find_font_file) Use groff_font_path instead of now
7696         obsolete GROFF_FONT_PATH.
7697         
7698         * postscript.c: (find_ps_file) Use groff_font_path instead of now
7699         obsolete GROFF_FONT_PATH.  Copy through temporary variable to
7700         avoid problems with constness.
7701
7702         * str.h: (macro cs_streq) New macro.
7703
7704         * version.h: (glob var default_config_path, include_path,
7705         groff_font_path) New vars.
7706         
7707 1998-02-23  Ben Pfaff  <blp@gnu.org>
7708
7709         * Many source files: Change verbose_msg() priority levels and
7710         messages.
7711
7712         * aggregate.c: Include debug-print.h.
7713
7714         * cmdline.c: (parse_command_line) Add --safer/-s and --command/-c
7715         options.
7716         (static var pre_syntax_message) Document --safer/-s and
7717         --command/-c.
7718
7719         * command.c: (cmd_erase, cmd_host) Disable if set_safer is set.
7720
7721         * dfm.c: (open_inline_file) [__CHECKER__] Zero out ext->file,
7722         because it's not used but it's still copied.
7723         (open_file_r) Remove gratuitous debug message.
7724
7725         * filename.c: (safety_violation) New function.
7726         (open_file) Remove gratuitous debug messages.  Don't allow pipe
7727         files if set_safer is set.
7728
7729         * get.c: Turn off debugging.
7730
7731         * getline.c: (getl_add_virtual_file) New function.
7732         (getl_read_line) Add verbose_msg() call for opening new syntax
7733         file.
7734         (getl_perform_delayed_reset) Add a return value describing whether
7735         any action was taken.  Call reset_eof().
7736
7737         * getline.h: Comment fix.
7738
7739         * groff-font.c: (groff_read_font) Use `goto next_iteration' in
7740         place of incorrect `continue'.  Use strtok_r() instead of
7741         strtok().  Always check strtok_r() return value.
7742         (groff_read_DESC) Use strtok_r() instead of strtok().
7743
7744         * lexer.c: (reset_eof) New function.
7745
7746         * main.c: (parse) Get a token after performing a delayed reset
7747         action; allow empty syntax files.
7748
7749         * postscript.c: (output_encodings) Use strtok_r() instead of
7750         strtok().
7751
7752         * q2c.c: (dump_parser) Use strtok_r() instead of strtok().
7753
7754         * set.q: Comment fixes.
7755         (glob var set_safer) New var.
7756         (internal_cmd_set) Support SAFER.
7757
7758         * str.h: [!HAVE_STRTOK_R] Declare strtok_r() prototype.
7759
7760         * temporary.c: (free_dictionary) Set d->splits to NULL after
7761         freeing.
7762
7763         * vars-atr.c: (clear_variable) Decrement dict->n_splits if
7764         variable deleted, not if it *isn't* deleted.
7765
7766 1998-02-16  Ben Pfaff  <blp@gnu.org>
7767
7768         * command.c: (array cmd_table[]) Add MATCH FILES.
7769
7770         * common.c: Comment fixes.
7771
7772         * data-list.c, dfm.c, error.c, filename.c, list.q, matrix-data.c,
7773         modify-vars.c, postscript.c, sfm-read.c, sfm-write.c, tab.c:
7774         Include alloca.h.  Problem reported by palme@uni-wuppertal.de
7775         (Hubert Palme).
7776
7777         * expr-opt.c: Include str.h.  Problem reported by
7778         palme@uni-wuppertal.de (Hubert Palme).
7779
7780         * get.c: (cmd_get) [DEBUGGING] Update v->p.get to v->get.
7781         (static var mtf_by) Change from char ** to variable **.
7782         (static var mtf_master) New var.
7783         (mtf_merge_dictionary) New function.
7784         (cmd_match_files) Init mtf_master.  Parse mtf_by according to new
7785         var type.  Reorder tests properly.  Initialize file->dict.  Detect
7786         TABLE= without BY=.  Read file dictionaries and merge them.  Give
7787         subcommand name with IN, LAST, FIRST error messages.  Create IN,
7788         LAST, FIRST variables.  Comment fixes.
7789         (mtf_free) Don't free default_dict.  Free mtf_master.
7790
7791         * getline.c: Define getl_mode.  Change getl_buf_size to size_t
7792         from int.
7793         (handle_line_buffer) Cast int to size_t in comparison to avoid
7794         warning.
7795
7796         * getline.h: Declare getl_mode extern.
7797
7798         * groff-font.c: (groff_read_font) Type-fix calls to getline.
7799         (groff_read_DESC) Make line_size a size_t.
7800         (match_tok) Parenthesize name to avoid macro expansion.
7801
7802         * mis-val.c: (copy_missing_values) New function.
7803
7804         * postscript.c: (postopen) Make buf_size a size_t.
7805
7806         * sfm-read.c: (dump_dictionary) Make global from static.  Print
7807         variable info in parts for easier debugging with Checker.
7808
7809         * temporary.c: (copy_variable) Use copy_value_labels().
7810         (new_dictionary) New arg: whether to copy file label, documents.
7811
7812         * val-labs.c: (copy_value_labels) New function.
7813
7814         * var.h: (enums MISSING_*) Add MISSING_COUNT.
7815
7816         * vars-atr.c: [GLOBAL_DEBUGGING] (force_dup_variable) New
7817         function.
7818         (dup_variable) Set prv_index, get.fv, get.nv.
7819
7820 Fri Feb 13 15:38:36 1998  Ben Pfaff  <blp@gnu.org>
7821
7822         * Makefile.am: (pspp_SOURCE) Add htmlP.h.
7823
7824         * Many source files: For ANSI-compliance, add empty statement
7825         after label.  Reported by palme@uni-wuppertal.de (Hubert Palme)
7826         and Micah Altman <maltman@www-vdc.fas.harvard.edu>.
7827
7828         * data-in.c: (parse_numeric) Some header files break on
7829         -DBL_MIN_10_EXP because they get a --; add () for safety.
7830         Reported by palme@uni-wuppertal.de (Hubert Palme).
7831
7832         * dfm.c: Idea by Dr Eberhard W Lisse <el@linux.lisse.na>.
7833         (struct dfm_fhuser_ext) Change `file' from FILE * to file_ext.
7834         (dfm_close) Use close_file_ext.
7835         (open_inline_file) Set file.file to NULL, not file.
7836         (open_file_r, open_file_w) Initialize file.file; fill in file_ext
7837         struct and use open_file_ext().
7838         (read_record) Use file.file.
7839
7840         * file-handle.q: (prepend_current_directory) Pass through special
7841         filenames.
7842
7843         * filename.c: Only include unistd.h if HAVE_UNISTD_H.
7844         (normalize_filename) Pass through special filenames.
7845         (open_file, close_file) Accept pipe| and |pipe syntaxes as
7846         equivalent.
7847         (dirname) Rename blp_dirname() because of name conflict on some
7848         OS.  All references changed.  Reported by palme@uni-wuppertal.de
7849         (Hubert Palme).
7850         (is_special_filename) New function.
7851
7852         * get.c: (GTSV_OPT*) Add GTSV_OPT_MATCH_FILES.
7853         (trim_dictionary) Conditionalize some of the options on whether
7854         GTSV_OPT_MATCH_FILES is in *options.
7855         (rename_variables) Don't allow variables to be renamed as scratch
7856         variables.
7857         (MTF_*) New enum series.
7858         (struct mtf_file) New struct.
7859         (static vars mtf_head, mtf_tail, mtf_by, mtf_n_by, mtf_free) New
7860         vars.
7861         (cmd_match_files, mtf_free) New functions.
7862
7863         * lexer.c: (match_int) Needed parentheses around name to escape
7864         macro expansion.  Reported by Micah Altman
7865         <maltman@www-vdc.fas.harvard.edu>.
7866
7867         * print.c: Needed to include alloca.h.  Reported by Micah Altman
7868         <maltman@www-vdc.fas.harvard.edu>.
7869
7870         * recode.c: (convert_to_double) Parenthesize -DBL_MIN_10_EXP to
7871         -(DBL_MIN_10_EXP).  Reported by palme@uni-wuppertal.de (Hubert
7872         Palme).
7873         
7874         * str.h: Include stdarg.h.  Reported by palme@uni-wuppertal.de
7875         (Hubert Palme) and Micah Altman <maltman@www-vdc.fas.harvard.edu>.
7876
7877 Thu Feb  5 00:18:21 1998  Ben Pfaff  <blp@gnu.org>
7878
7879         * html.c: (struct html_driver_ext) Move into htmlP.h.
7880         (html_preopen_driver) Initialize cp_x, cp_y.
7881         (html_submit) Implement as call to output_tab_table().
7882         (change_attributes) New function.
7883         (escape_string) New function.
7884         (output_tab_table) New function.
7885
7886         * list.q: (write_all_headers) Add code for writing headers for the
7887         html driver.
7888         (clean_up) Write out the html close-table tag.
7889         (determine_layout) Ignore html driver.
7890         (list_cases) Write html data.
7891
7892         * som.c: (som_submit) Move more of the code into output_table().
7893
7894         * tab.c: (static var hit) Make a global var and rename tab_hit.
7895         (static var tab_table_class) Make a global var.
7896
7897         * htmlP.h: New file.
7898
7899 Tue Feb  3 16:12:18 1998  Ben Pfaff  <blp@gnu.org>
7900
7901         * dump-sysfile.c: Removed.
7902
7903         * html.c: (preclose) Change comment in emitted code.
7904
7905         * matrix-data.c: Debugging off by default.  Comment fixes.
7906         (static var container) New var.
7907         (cmd_matrix_data) Create and destroy container.  Initialize
7908         is_per_factor[] to 0s.  Move code into new function
7909         string_to_content_type().  Require split values to be present in
7910         the data when ROWTYPE_ is explicit.  Call specific function, not
7911         general read_matrices().
7912         (string_to_content_type) New function.
7913         (context) Exclude all whitespace, not just spaces.
7914         (mget_token) A dot is a number.  Add assertion.
7915         (static var data) Renamed nr_data.
7916         (static var factor_values) Renamed nr_factor_values.
7917         (read_matrices) Renamed read_matrices_without_rowtype().  Handle
7918         only specific case.  Close data_file before exit.
7919         (fill_matrix) New function.
7920         (read_data_lines) Renamed nr_read_data_lines().  Remove debug
7921         printing.  Style fixes.  Message fixes.  Move code into
7922         fill_matrix().
7923         (read_matrices_without_rowtype) Rename
7924         matrix_data_read_without_rowtype().  Fix off-by-one error on
7925         loops.  Allocate nr_data[] memory from arena.
7926         (read_matrices_with_rowtype) Removed.
7927         (read_splits) Renamed nr_read_splits().  Style fixes.
7928         (read_factors) Renamed nr_read_factors().
7929         (dump_cell_content) Comment fixes.  Arguments changed.  Change
7930         debug printing.  All references changed.
7931         (output_data) Renamed nr_output_data().
7932         (static var wr_content) New var.
7933         (struct factor_data) New struct.
7934         (static var wr_data) New var.
7935         (static var wr_current) New var.
7936         (matrix_data_source_destroy_source) Removed.
7937         (read_matrices_with_rowtype) New function.
7938         (matrix_data_read_with_rowtype) New function.
7939         (wr_read_splits) New function.
7940         (compare_factors) New function.
7941         (wr_output_data) New function.
7942         (wr_read_rowtype) New function.
7943         (wr_read_factors) New function.
7944         (wr_read_indeps) New function.
7945         (glob var matrix_data_source) Make destroy_source member NULL as
7946         well.
7947
7948 Fri Jan 23 00:09:08 1998  Ben Pfaff  <blp@gnu.org>
7949
7950         * lexer.c: (syntax_error) Give better error message when at end of
7951         file.
7952
7953         * matrix-data.c: (var content_names[]) Fix PROX spelling.  Change
7954         N_SCALAR to output as plain N.
7955         (mdump_token) Change output format.
7956         (context) Fix message output interaction with spaces in input.
7957         (another_token) New function.
7958         (force_eol) Improved error message.
7959         (static var max_cell_index) New var.
7960         (read_matrices) Init `cells'.  factor_values is now per-cell.
7961         Init max_cell_index.
7962         (read_data_lines) Replace `compare' local with new `compare' arg.
7963         Debugging messages changed.  Only read factors if per_factor.
7964         Propagate error return from read_factors(), force_eol().
7965         Copy N_SCALAR values across the N vector.
7966         (read_matrices_without_rowtype) Don't init `cells'.  Don't need to
7967         check parentheses manually since we now have is_per_factor[].
7968         Call read_data_lines() with new args.  Check for end of data after
7969         looping, using another_token().
7970         (read_factors) Arguments changed.  Use max_cell_index to determine
7971         whether to read or compare factors.  Message fixes.
7972         (dump_cell_content) New function.
7973         (output_data) Completely rewritten because content types were
7974         supported to be nested inside factor values, not vice versa.
7975         
7976 Thu Jan 22 00:26:38 1998  Ben Pfaff  <blp@gnu.org>
7977
7978         * lexer.c: (syntax_error) Support formatted varargs messages.
7979
7980         * matrix-data.c: Turn debugging on by default.
7981         (static content_type[]) New array.
7982         (static content_names[]) New array.
7983         (static rowtype_, varname_) New vars.
7984         (static is_per_factor[]) New array.
7985         (static split_values) Moved declaration.
7986         (static n_continuous, first_continuous) New var.
7987         (cmd_matrix_data) Don't init split_values.  Assign ROWTYPE_ to
7988         rowtype_.  Simplify SPLIT code.  Init is_per_factor[].  Assign
7989         VARNAME_ to varname_.  Initialize first_continuous, n_continuous.
7990         Check for continuous variables.
7991         [DEBUGGING] (debug_print) Remove content_names[].
7992         (mdump_token) New macro.
7993         (mget_token_dump) New function.
7994         (mdump_token) New function.
7995         (context) New function.
7996         (mget_token) Fix messages.
7997         (static var data, split_values, factor_values) New vars.
7998         (read_matrices) Manage split_values, factor_values.
7999         (read_data_lines) New function.
8000         (read_matrices_without_rowtype) Implemented.
8001         (read_splits) Message fixes.  Uses `just_read'.
8002         (read_factors) New function.
8003         (output_data) New function.
8004         (matrix_data_source_destroy_source) Close the file handle.
8005         (glob var matrix_source) Change name from "DATA LIST" to "MATRIX
8006         DATA".
8007
8008         * str.c: (strpadcmp) Removed.
8009
8010         * vfm.c: (dump_splits) Initialize i; fix test for end of splits.
8011
8012 Sun Jan 18 00:30:59 1998  Ben Pfaff  <blp@gnu.org>
8013
8014         * Lots of source files: Add cast to unsigned character to calls to
8015         tolower() and toupper().
8016
8017         * aggregate.c: Set default_dict.splits to NULL.
8018
8019         * command.c: (static variable tab[]) Add MATRIX DATA.
8020
8021         * data-in.c: Add debugging defines.  Formatting fixes.
8022
8023         * expr-opt.c: Formatting fixes.
8024
8025         * lexer.c: (syntax_error) Message fixes.
8026
8027         * matrix-data.c: New enum series.
8028         (static vars fmt, section, diag, explicit_rowtype, signle_split,
8029         split_values, n_factors, factors, cells, pop_n, contents,
8030         n_contents) New vars.
8031         (cmd_matrix_data) Finished implementation.
8032         (compare_variables_by_mxd_vartype) New function.
8033         [DEBUGGING] (debug_print) New function.
8034         (static vars mtoken, mtokstr, mtoklen, mtokval) New vars.
8035         (read_matrices) New function.
8036         (read_matrices_without_rowtype) New function.
8037         (read_matrices_with_rowtype) New function.
8038         (read_splits) New function.
8039         (mget_token) New function.
8040         (force_eol) New function.
8041         [0] (test_tokenizer) New function.
8042         (matrix_data_source_destroy_source) New function.
8043         (glob var matrix_data_source) New var.
8044
8045         * misc.h: Include ieeefp.h if present.
8046
8047         * split-file.h: (cmd_split_file) Changes corresponding to struct
8048         dictionary changes.
8049
8050         * str.h: Fix memmem prototype.
8051
8052         * temporary.c: (save_dictionary, restore_dictionary,
8053         free_dictionary) Changes corresponding to struct dictionary
8054         changes.
8055
8056         * var.h: (MXD_* enums) New enum series.
8057         (struct matrix_data_proc) New struct.
8058         (struct split) Removed.
8059         (struct dictionary) Changed `splits' member from `split *' to
8060         `variable **'.
8061         (macro force_create_variable) New macro.  Replaced lots of
8062         create_variable()/assert() calls with calls to this macro.
8063
8064         * vars-atr.c: (discard_variables) Changed assertion.
8065         [GLOBAL_DEBUGGING] (force_create_variable) New function
8066         called by the macro of the same name.
8067         (clear_variable) Changes to delete splits from the dictionary
8068         corresponding to struct dictionary changes.
8069
8070         * vars-prs.c: (parse_variables) [GLOBAL_DEBUGGING] Check for
8071         corrupted variable `index' values in the dictionary passed in
8072         every time this function is called.
8073
8074         * vfm.c: (dump_splits, SPLIT_FILE_procfunc) Changes corresponding
8075         to struct dictionary changes.
8076
8077 Tue Jan 13 23:45:02 1998  Ben Pfaff  <blp@gnu.org>
8078
8079         * Makefile.am: (pspp_SOURCES) Add matrix-data.c.
8080
8081         * command.c: New includes.
8082         (static array cmd_table[]) Add ERASE, HOST, NEW FILE.
8083         (cmd_erase) New function.
8084         [unix] (shell) New function.
8085         (run_command) New function.
8086         (cmd_host) New function.
8087         (cmd_new_file) New function.
8088
8089         * expr-prs.c: (parse_primary) Message fix.
8090
8091         * inpt-pgm.c: Formatting fix.
8092         (cmd_reread) Implement the FILE subcommand.
8093
8094         * matrix-data.c: New file.
8095
8096         * q2c.c: (dump_header) Change output commenting style.
8097
8098         * weight.c: Comment fix.
8099
8100 Tue Jan 13 00:53:39 1998  Ben Pfaff  <blp@gnu.org>
8101
8102         * aggregate.c: (buf64_10x) Renamed buf64_1xx, all references
8103         changed.
8104         (buf_10x) Renamed buf_1xx, all references changed.
8105         (cmd_aggregate) Implemented cases 010, 011, 110, and 111 (all
8106         cases now implemented).
8107         (create_sysfile) New function.
8108         (agr_11x_func) New function.
8109
8110         * data-in.c: (parse_numeric) Work properly if there's an
8111         explicitly coded decimal point in the data and decimal places are
8112         specified on DATA LIST.  Bug reported by Dr Eberhard W Lisse
8113         <el@linux.lisse.na>.
8114
8115         * get.c: (cmd_get, cmd_save_internal) Allow extraneous slash
8116         before file specification on GET, SAVE, XSAVE.  Bug reported by Dr
8117         Eberhard W Lisse <el@linux.lisse.na>.
8118
8119         * q2c.c: [!HAVE_STRERROR] Include misc/strerror.c, not
8120         strerror.c.  Bug reported by Alexandre Oliva
8121         <oliva@dcc.unicamp.br>.
8122
8123         * sort.c: Include sort.h.  Comment fixes.  A few esthetic fixes.
8124         (static var separate_case_tab) New var.
8125         (cmd_sort_cases) Cancel temporary transformations here.  Free
8126         v_sort before return.
8127         (sort_cases) Run an EXECUTE procedure if SEPARATE is nonzero and
8128         we're reading from a sort stream.  Don't cancel temporary
8129         transformations.  Offload internal sorting to do_internal_sort().
8130         (do_internal_sort) New function.  Handles internal sorting even
8131         when SEPARATE is nonzero.  Doesn't free v_sort.
8132         (do_external_sort) Take new arg SEPARATE.  Only destroy `x' if
8133         it's non-NULL.
8134         (write_initial_runs) Take new arg SEPARATE.  Only destroy the old
8135         sink if SEPARATE is zero.
8136         (read_output_cases) Renamed read_sort_output(), all references
8137         changed.  Now uses separate_case_tab when it exists.
8138         (write_separate) New function.
8139
8140         * vfm.c: (page_to_disk) Destroy memory_source_cases, not
8141         memory_sink_cases.  Don't redundantly call
8142         vfm_source->destroy_source().
8143         (memory_stream_mode) After switching over, set memory_sink_cases
8144         to NULL.
8145
8146 Sat Jan 10 23:35:51 1998  Ben Pfaff  <blp@gnu.org>
8147
8148         * aggregate.c: (struct agr_var) Expand dbl[] array from 2 to 3
8149         elements.
8150         (static var prev_case) New, moved out of aggregate_single_case()
8151         local scope.
8152         (static var buf64_10x, buf_10x) New.
8153         (cmd_aggregate) Initialize prev_case.  Comment fixes.  Implement
8154         the 000, 001, 100, and 101 cases.  Free prev_case.
8155         (parse_aggregate_functions) Disallow scratch variables.
8156         (free_aggregate_functions) Only free agr_dict if non-null.  Use
8157         iter->function to determine numeric/string type, not
8158         iter->src->type.
8159         (aggregate_single_case) Don't manage prev_case.  Initialize
8160         aggregate info after dumping it.
8161         (accumulate_aggregate_info) Fix sum, weighted sum, mean, weighted
8162         mean, stddev, weighted stddev definitions.
8163         (dump_aggregate_info) Implemented.
8164         (initialize_aggregate_info) Renamed from
8165         initialize_aggregate_functions().  Initializes dbl[2].
8166         (agr_00x_trns_proc, agr_00x_end_func, write_case_to_sfm,
8167         agr_10x_trns_proc, agr_10x_trns_free, agr_10x_end_func) New.
8168
8169         * cases.c: (alloc_val) Removed.
8170
8171         * get.c: (cmd_save_internal) Initialize new `dict' member.
8172
8173         * sfm-write.c: (sfm_write_dictionary, write_header,
8174         write_variable, write_value_labels, write_documents) Reorganize,
8175         simplify for new parameter structure.
8176         (write_variable) Only one variable * argument now.
8177
8178         * sfm.h: (struct sfm_write_info) Removed `pri', `sec', and
8179         replaced by new `dict' member.
8180
8181         * temporary.c: (new_dictionary) Initialize n_documents.
8182
8183         * vars-atr.c: (dup_variable) Allocate `value's from dict into
8184         v->fv manually.
8185         (init_variable, replace_variable) Eliminate usage of alloc_val().
8186
8187         * vars-prs.c: (parse_DATA_LIST_vars) Accept PV_NO_SCRATCH option.
8188
8189         * vfm.c: (arrange_compaction) Allow `temporary' value of 2 to
8190         signal that AGGREGATE is to be used for forming final cases.
8191         (close_active_file) Call end_func before stopping lagging.  Cancel
8192         temporary after finishing compaction.
8193         (write_case) Comment fixes.  Cleaned up.
8194         (compact_case) Let AGGREGATE handle compaction when `temporary' is
8195         2.
8196
8197 Sat Jan 10 02:10:47 1998  Ben Pfaff  <blp@gnu.org>
8198
8199         * Makefile.am: (BUILT_SOURCES) Add means.c.
8200         (pspp_SOURCES) Add means.c.
8201         (EXTRA_DIST) Add means.q.
8202
8203         * command.c: (array cmd_table[]) Add MEANS.
8204
8205         * common.h: Esthetic fixes.  Comment fixes.  Test for
8206         MAX_SHORT_STRING greater than 8.
8207         (macros LOWEST, HIGHEST) New.
8208
8209         * data-in.c, data-list.c, recode.c: Comment fixes.
8210
8211         * means.q: New file, base version.
8212
8213         * mis-val.c: (parse_num_or_range, parse_numeric) Replace -DBL_MAX
8214         with LOWEST, DBL_MAX with HIGHEST.
8215
8216         * q2c.c: (dump_vars) Add an enum to array types giving the number
8217         of values for the enum.
8218
8219         * sfm-read.c: (sfm_read_dictionary, read_machine_flt64_info)
8220         Replace second_lowest_value with second_lowest_flt64.
8221
8222         * sfm-write.c: (write_variable, write_rec_7_34) Replace
8223         second_lowest_value with second_lowest_flt64.
8224
8225         * t-test.q: Comment fix.
8226
8227         * temporary.c: (restore_dictionary) Esthetic fix.
8228
8229         * tokens.h: (force_match_id, force_match, force_string, force_int,
8230         force_num, force_id) Replace msg() with syntax_error().
8231
8232         * var.h: (struct means_proc) New.
8233         (struct variable) Add mns member to `p' union.
8234
8235         * vars-prs.c: (parse_variable, parse_dict_variable,
8236         parse_variables, parse_DATA_LIST_vars) Replace msg() with
8237         syntax_error().
8238
8239 Thu Jan  8 22:28:41 1998  Ben Pfaff  <blp@gnu.org>
8240
8241         * Makefile.am: (pspp_SOURCES) Add tab.h.
8242
8243         * Most source files: Added a cast to unsigned char in usages of
8244         the ctype is*() functions.  Replaced `end of command expected'
8245         calls to msg() with calls to syntax_error().
8246
8247         * frequencies.q: (dump_condensed) Fix tab_dim() column reference.
8248
8249         * lexer.c: (hex_val) Removed (was dead code).
8250         (idmatch) Parenthesize function name to avoid macro expansion.
8251
8252         * postscript.c: Comment fixes.
8253         (ps_preopen_driver) Change default font size to 10pt.
8254
8255         * sfm-read.c: (read_variables) Byteswap sv.print, sv.write as
8256         int32s.
8257         (parse_format_spec) Change system-file format spec argument type
8258         to int32.  Parse the format spec with bitwise operators.
8259
8260         * sfmP.h: (struct sysfile_format) Removed.
8261         (struct sysfile_variable) Changed print, write members from
8262         sysfile_format to int32.
8263
8264         * tokens.h: Esthetic fixes.
8265         [__GNUC__] (macro id_match) New macro to hopefully speed up
8266         identifier matching.
8267         (macros match_id, match_tok, match_int) Implemented in
8268         compiler-independent manner; no longer GNU C only.
8269
8270         * vfm.h: Include time.h.
8271
8272 Mon Jan  5 11:06:15 1998  Ben Pfaff  <blp@gnu.org>
8273
8274         * data-list.c: (dump_fixed_table) Change tab_dim().
8275
8276         * dump-sysfile.c: (open_sysfile) Fix mmap() call.
8277
8278         * error.c: Include command.h.
8279
8280         * frequencies.g: Formatting fixes.
8281
8282         * frequencies.q: Add tab_dim() calls.  Make the total cell a
8283         joined cell.
8284
8285         * glob.c: Include command.h.
8286
8287         * sfm-read.c: (struct sfm_fhuser_ext) New members sysmis, highest,
8288         lowest.
8289         (sfm_read_dictionary) Initialize sysmis, highest, lowest.
8290         (sfm_read_machine_flt64_info) Update sysmis, highest, lowest.
8291         (read_variables) Byteswap sv.type; byteswap sv.print, sv.write as
8292         the other elements (is this right?).
8293         (read_variables) Use lowest, highest members.
8294         (parse_format_spec) New arg `vv' for more stringent checking.
8295         (dump_dictionary) Byteswaps nonexplicit data.
8296         (sfm_read_case) Byteswap numeric data.
8297
8298         * som.c: Initialize table_num to 1.
8299         (render_segments) Remember to increment y_index after each table
8300         segment.
8301
8302         * sysfile-info.c: (cmd_sysfile_info) Change tab_dim().  Don't call
8303         avl_count() on a NULL tree.  No title for the second table.
8304         (cmd_display) Handle DISPLAY VECTORS by calling display_vectors().
8305         Handle AS_SCRATCH as AS_NAMES.  Warn if no variables.  Re-enable;
8306         fix call to display_variables().
8307         (display_variables) Default to 4 columns, not 3.  Set up headers.
8308         Column title is Variable, not Name.  Fix index column.
8309         Add joint text.  Add tab_dim().  Handle value labels properly.
8310         Handle DISPLAY LABELS properly.  Draw boxes correctly.
8311         (describe_variable) Value labels don't need titles.  Don't clear
8312         nonexistent index column.
8313         (compare_vectors_by_name) New function.
8314         (display_vectors) New function.
8315
8316         * tab.c: (tab_height) Add assertion.
8317         (tab_null) Add debug code.
8318         (evaluate_dimensions) Add debug code.
8319
8320         * var.h: (struct variable) get_proc data is sometimes used
8321         simultaneously with other per-procedure info, therefore it was
8322         removed from the union.  All references changed.        
8323
8324 Sun Jan  4 18:13:33 1998  Ben Pfaff  <blp@gnu.org>
8325
8326         * ascii.c: (ascii_close_page) Put title on second line of headers
8327         if there is no subtitle.
8328
8329         * command.c: (glob var cur_proc) Move definition here, from
8330         common.c.
8331         (cmd_remark) Emit blank line before remarks.
8332
8333         * command.h: (glob var cur_proc) Move declaration here, from
8334         common.h.
8335
8336         * data-list.c: (dump_fixed_table) Fix messages.
8337         (dump_free_table) Call tab_nat_dim().
8338
8339         * descript.q: (dump_z_table) Modify tab_dim() call.
8340
8341         * frequencies.q: (dump_condensed, dump_statistics) Add tab_dim()
8342         call.
8343         (dump_statistics) Don't output header.
8344
8345         * groff-font.c: Minor format fix.
8346
8347         * html.c: Comment fix.
8348
8349         * list.q: (write_varname) Indent after advancing page.
8350
8351         * output.h: Minor reordering.
8352
8353         * postscript.c: Comment fixes.  Many places, '\n' was replaced by
8354         a reference to eol[].
8355         (struct ps_driver_ext) New member eol[].
8356         (ps_preopen_driver) Initialize eol[].
8357         (ps_postopen_driver) Fix sense of text for text_opt, line_opt
8358         defaults.  Handle headers.  Fix test for minimum page length.
8359         (static var option_tab[]) Add `line-ends'.
8360         (ps_option) Handle line-ends to change eol[].
8361         (postopen) Scale prop_em_width and fixed_width properly.  Set the
8362         prologue title to outp_title if applicable.  Replace the prologue
8363         line ends with eol[].  Call draw_headers() if headers are enabled.
8364         (text_width) New function.
8365         (out_text_plain) New function.
8366         (draw_headers) New function.
8367
8368         * print.c: (dump_table) Call tab_nat_dim().
8369
8370         * som.c: (som_blank_line) Only advance a line if not at the top of
8371         a page.
8372         (som_submit) Move several informational table calls here.
8373         Increment subtable_num if SOMF_NO_TITLE not set.
8374         (output_table) Advance a line if SOMF_NO_SPACING not set.
8375         (render_columns, render_segments, render_simple) Handle spacing
8376         between tables.  Handle table titles.  Remove debug output.
8377
8378         * som.h: (SOMF_*) New enum series.
8379         (struct som_table_class) New member `flags'.
8380
8381         * sysfile-info.c: (cmd_sysfile_info) Calls tab_nat_dim().  No
8382         headers or spacing.
8383         (display_variables) Calls tab_nat_dim().
8384         (describe_variable) Remove restriction on number of value labels.
8385         Make value labels separated by thin lines.
8386
8387         * tab.c: (tab_create) Default `flags' to none.
8388         (tab_float) New arg `w'.  All references changed.
8389         (tab_nat_dim) New function.
8390         (tab_output_text) No title or spacing.
8391         (tab_flags) New function.
8392         (tabi_flags) New function.
8393         (tabi_title) New function.
8394         (strip_height) Removed.
8395         (tabi_render) Skip title when necessary.
8396         (static var tab_tab_class) Add tabi_flags, tabi_title.
8397         (evaluate_dimensions) Disable display of column, row size.
8398         (sum_columns) Add title height to top header.
8399         (render_strip) Moved within file.
8400
8401         * tab.h: (struct tab_table) New member `flags'.
8402
8403         * vfm.c: (dump_splits) Calls tab_nat_dim().  No title.
8404
8405 Sat Jan  3 16:55:44 1998  Ben Pfaff  <blp@gnu.org>
8406
8407         * Most source files: Add `const' attribute in all appropriate
8408         places.
8409         
8410         * sysfile-info.c: (cmd_sysfile_info) Add tab_dim() call, add a
8411         column to the variables table for use by describe_variable().
8412         (cmd_display) Disable for the present.
8413         (display_documents) Don't wrap documents.
8414         (display_variables) Table has four columns now.
8415         (describe_variable) Table has four columns now.  Don't use a
8416         subtable, use joined cells instead.
8417
8418         * tab.c: (tab_create) Don't set `join'.
8419         (tab_realloc) ct array is not made up of a_string's.
8420         Reallocate trh, hrh, h arrays, initialize trh array.  Initialize
8421         cell contents on GLOBAL_DEBUGGING, not DEBUGGING.
8422         (text_format) New function.
8423         (tab_title) Rewritten, uses text_format().
8424         (tab_text) Rewritten, uses text_format().
8425         (tab_joint_text) New function.
8426         (tab_join) Removed.
8427         (static var hit) New variable.
8428         (render_strip) New args r1, r2.  Implement joined cells that fit
8429         on a single page.
8430         (tabi_render) Increment hit.  Pass new args to render_strip().
8431         (evaluate_dimensions) [GLOBAL_DEBUGGING] Check for uninitialized
8432         cells.  For t_naw and t_nah, ignore joined cells and null cells in
8433         calculations.
8434         
8435         * tab.h: (struct tab_join_rect) Removed.
8436         (struct tab_table) Removed `join'.
8437         (TAB_JOIN_MAIN) Removed.
8438         (struct tab_joined_cell) New struct.
8439         (TAT_NOWRAP) New enum.
8440
8441 Fri Jan  2 01:39:58 1998  Ben Pfaff  <blp@gnu.org>
8442
8443         * ascii.c: (ascii_postopen) Replace ASCII_* macros with their
8444         expansions.
8445         (ascii_postopen_driver) Fix initialization of *_spacing so that
8446         the TAL_0 bit doesn't count.
8447
8448         * data-list.c: (dump_fixed_table) Use natural width for Format
8449         column.
8450
8451         * glob.c: (rerange) Removed.
8452         (get_date) Formatting fixes.  Internationalization fix.
8453
8454         * html.c: (html_postopen_driver) Replace HTML_DEFAULT_OUTPUT_FILE
8455         with "pspp.html".
8456
8457         * postscript.c: (ps_postopen_driver) Replace
8458         PS_DEFAULT_OUTPUT_FILE with "pspp.ps".
8459
8460         * som.c: (som_submit) Don't eject page before every table.
8461         (output_table) Fix order of arguments on call to area().
8462         (render_columns) Fix calculation of max_len.
8463         
8464         * tab.c: (tabi_cumulate) Minor change to increase elegance.
8465         (render_strip) New function.
8466         (strip_height) New function.
8467         (tabi_render) Rewrite as calls to render_strip().
8468
8469         * tab.h: (TAT_* enums) Removed TAT_RICH, all references removed.
8470         Renumbered TAT_PRINTF, TAT_TITLE, TAT_FIX to correspond better
8471         with the TAB_* and OUTP_T_* constants.
8472         
8473 Thu Jan  1 11:53:52 1998  Ben Pfaff  <blp@gnu.org>
8474
8475         * Makefile.am: Formatting fixes.
8476
8477         * ascii.c: (ascii_postopen_driver) Initialize *_line_spacing[],
8478         *_line_width[].
8479
8480         * data-list.c: (dump_fixed_table) Add tab_dim() call.
8481
8482         * descript.q: (dump_z_table, display) Add tab_dim() calls.
8483
8484         * dump-sysfile.c: (glob var length) Make type off_t.
8485         (usage) Fix arguments.
8486         (main) Return 0.
8487
8488         * output.h: (OUTP_T_*) Change constants' value to match tab.h.
8489         Now right-justification is the default so many references had to
8490         change.
8491         (struct outp_class) Removed line_width, all references changed.
8492         (OUTP_DEV_*) Add OUTP_DEV_DISABLED.
8493         (struct outp_driver) Add elements horiz_line_width,
8494         vert_line_width, horiz_line_spacing, vert_line_spacing.  Remove
8495         som element.
8496
8497         * postscript.c: (outp_encodings) Formatting fixes.  Fix garbage
8498         collection.
8499         (postopen) Initialize all the informational members of
8500         outp_driver.
8501
8502         * som.c: (som_blank_line) New function, renamed from blank_line(),
8503         all references changed.
8504         (som_submit) Disables drivers whose pages can't be opened.
8505         (render_columns, render_simple, render_segments) Add debug output.
8506         (render_columns) Fix loop range.
8507         (render_simple) Don't try to render the headers, they're taken
8508         care of automatically.  Advance cp_y past the table when done.
8509         (render_segments) Fix loop ranges.
8510
8511         * tab.c: Initialize new members of tab_table.
8512         (tab_vline) Handle trv[]; don't set style for spacing-only lines.
8513         (tab_hline) Handle trh[]; don't set style for spacing-only lines.
8514         (tab_box) Handle trh[], trv[]; don't set style for spacing-only
8515         lines.
8516         (set_expr) Removed.
8517         (tab_dim) New function.
8518         (tab_col_width) Removed.
8519         (tab_row_height) Removed.
8520         (tab_output_text) Call tab_dim().
8521         (tabi_driver) Call evaluate_dimensions(), sum_columns().
8522         (tabi_area) Implemented.
8523         (tabi_cumulate) Implemented.
8524         (tabi_render) Partially implemented, but broken.
8525         (var tab_table_class) Made static.
8526         (evaluate_dimensions) New function.
8527         (sum_columns) New function.
8528
8529         * tab.h: (enum t_*) Now start at t_end.  New: t_ptw, t_nr, t_nc,
8530         t_nah, t_naw, t_neg, t_xch, t_dup, t_lbl, t_jnz, t_sac, t_sar,
8531         t_scr, t_srr, t_sentinel.  Removed: t_nat.
8532         (struct tab_table) New: wl, wr, ht, hb, trh, hrh, trv, wrv, dim,
8533         max_stack_height, w, h.  Removed: ce, re.
8534         (macro blank_line) Removed.
8535         (glob var zero_length) Removed.
8536
8537 Fri Dec 26 15:44:31 1997  Ben Pfaff  <blp@gnu.org>
8538
8539         * Most source files: include some of the new include files broken
8540         out of var.h.
8541         
8542         * Makefile.am: (pspp_SOURCES) Add all the new source files to the
8543         list.
8544
8545         * aggregate.c: (glob var outfile) Make static.
8546
8547         * command.c: (glob var pgm_state) Move here.
8548
8549         * common.c: (glob vars endian, second_lowest_value, pgmname,
8550         finished, curdate, cur_proc, start_interactive, history_file) Move
8551         here.
8552
8553         * descript.q: (structs dsc_z_score, descriptives_trns) Move here.
8554
8555         * file-handle.q: (glob vars files, inline_file) Move here.
8556
8557         * glob.c: Lost lots of glob vars, detailed in individual file
8558         entries.
8559         (init_glob) set_printer, set_screen were obsolete, deleted.
8560         set_cprompt has fewer spaces because pspp has fewer letters than
8561         fiasco.
8562
8563         * inpt-pgm.c: (glob vars inp_init, inp_init_size) Move here.
8564         (inp_nval) Made static.
8565
8566         * lexer.c: (glob vars token, tokval, tokstr, tokstr_size,
8567         tokstr_len, toklongstr, tokint) Move here.
8568
8569         * misc.c: Lost several vars and functions.
8570
8571         * set.q: (all the set_* variables) Move here.
8572
8573         * str.c: (strmaxcpy, strbarepadcpy, strbarepadlencpy, strpadcpy,
8574         blpstrset, strpadcmp, memrev, memrmem, cmp_str) Move here from
8575         misc.c.
8576
8577         * tab.c: (set_expr, tab_col_width, tab_row_height) New functions.
8578
8579         * tab.h: (enum series t_*) New enums.
8580         (struct tab_table) Use arena struct tag.  New members ce, re.
8581
8582         * tokens.h: Comment fixes.
8583
8584         * var.h: Move lots of enums and variables and functions and
8585         structures to other files.  Use and declare a lot more union and
8586         struct tags.  Comment fixes.  
8587
8588         * vector.c: (glob vars vec, nvec) Move here.
8589
8590         * vfm.c: (glob vars reinit_sysmis, reinit_blanks, init_zero,
8591         init_blanks, last_vfm_invocation) Move here.
8592
8593         * cases.h: New file.
8594         (struct long_vec) Move here.
8595         (vec_init, vec_clear, vec_insert, vec_delete, devector, envector)
8596         Move here.
8597
8598         * command.h: New file.
8599         (STATE_* enums) Move here.
8600         (glob var pgm_state) Move here.
8601
8602         * format.c: New file.
8603         (glob var formats) Move here.
8604         (parse_format_specifier_name, fmt_to_string,
8605         check_input_specifier, check_output_specifier,
8606         check_string_specifier, convert_fmt_ItoO, parse_format_specifier)
8607         Move here.
8608
8609         * format.h: New file.  Move functions now in format.c here.
8610         (FMT_* enums) Move here.
8611         (struct fmt_desc) Move here.
8612         (FCAT_* enums) Move here.
8613         (struct fmt_spec) Move here.
8614         (glob vars formats, fmt_parse_ignore_error) Move here.
8615
8616         * inpt-pgm.h: New file.
8617         (INP_* enums) Move here, make #defines into enums.
8618         (glob vars inp_init, inp_init_size) Move here.
8619
8620         * sort.h: New file.
8621         (glob vars v_sort, nv_sort) Move here.
8622         (sort_cases, read_sort_output) Move here.
8623
8624         * vector.h: New file.
8625         (struct vector) Move here, add struct tag.
8626         (glob vars vec, nvec) Move here.
8627         (find_vector) Move here.
8628
8629         * New file.
8630         (glob vars last_vfm_invocation, temp_case, reinit_sysmis,
8631         reinit_blanks, init_zero, init_blanks) Move here.
8632         (struct case_stream) Move here.
8633         (glob vars vfm_source, vfm_sink, vfm_memory_stream,
8634         vfm_disk_stream, sort_stream, data_list_source,
8635         input_program_source, file_type_source, get_source, n_lag) Move
8636         here.
8637         (procedure, write_case, lagged_case, compact_case, page_to_disk)
8638         Move here.
8639                 
8640 Wed Dec 24 22:40:42 1997  Ben Pfaff  <blp@gnu.org>
8641
8642         * Makefile.am: (pspp_SOURCES) Added html.c, som.c, som.h.
8643         (LDADD) Add libdcdflib.
8644
8645         * ascii.c: Comment and formatting fixes.  Almost every external
8646         function had an assert added, checking driver_open and page_open.
8647         (ascii_init_driver) Broken into ascii_preopen_driver,
8648         ascii_postopen_driver, ascii_close_driver.  Manages driver_open.
8649         (ascii_open_page) Sets page_open.
8650         (ascii_close_page) Clears page_open.
8651
8652         * html.c: Comment and formatting fixes.  Almost every external
8653         function had an assert added, checking driver_open and page_open.
8654         (html_init_driver) Broken into html_preopen_driver,
8655         html_postopen_driver, html_close_driver.  Manages driver_open.
8656         (html_open_page) Sets page_open.
8657         (html_close_page) Clears page_open.
8658         (html_submit) Disabled.
8659
8660         * lexer.c: (parse_string) Remove debugging printf.
8661
8662         * list.q: (determine_layout) Open a page if one is not yet open.
8663
8664         * output.c: Comment fixes.
8665         (add_class) Set the class member of the new list element.
8666         (parse_options) Don't handle device type.
8667         (colon_tokenize) New function.
8668         (configure_driver) New four-field format with a field for device
8669         type.  Now initialize driver_open, page_open, next, and prev
8670         fields.  Use new colon_tokenize() function.  Don't do a memory
8671         copy to replace a driver, it doesn't work; instead delete the old
8672         driver and insert a new one.
8673         (destroy_driver) Don't call som_destroy_driver().  Close the page
8674         if it's open.  Find the class in the list of classes and decrement
8675         that reference count.  Remove the driver from the global driver
8676         list.
8677         (outp_iterate_enabled_drivers) Renamed outp_drivers().  All
8678         references changed.  Rewritten.  Don't return a driver that's not
8679         enabled.
8680         (outp_eject_page) All references to som_internal_eject_page()
8681         changed to use this.  Sets cp_x to 0 as well as cp_y.
8682
8683         * output.h: (OUTP_I_* enums) Removed.
8684         (struct som_submission_form) Removed.
8685         (struct outp_class) init_driver broken into preopen_driver,
8686         postopen_driver, and close_driver.  submit changed to take a
8687         som_table argument.
8688
8689         * postscript.c: Comment and formatting fixes.  Almost every
8690         external function had an assert added, checking driver_open and
8691         page_open.
8692         (ps_init_driver) Broken into ps_preopen_driver,
8693         ps_postopen_driver, ps_close_driver.  Manages driver_open.
8694         (ps_open_page) Sets page_open.
8695         (ps_close_page) Clears page_open.
8696
8697         * som.c: New file, base implementation.
8698         
8699         * som.h: (struct som_table) Add struct tag.
8700         (enum SOM_COL_ACROSS) Removed.
8701         (SOM_ROWS, SOM_COLUMNS) New enums.
8702         (struct som_table_class) Add member `cumulate'.  Remove `segment';
8703         change `render' arguments.
8704         (struct som_point, struct som_rect) Removed.
8705         (som_submit_table) Fixed typo, should have been som_submit.
8706
8707         * sysfile-info: (describe_variable) Don't try to insert a
8708         subtable; just destroy it for now.
8709
8710         * t-test.q: Include dcdflib/cdflib.h instead of cdflib.h.  Fix
8711         references to value labels.
8712
8713         * tab.c: (tab_destroy) New function.
8714         (tab_columns) Change argument.
8715         [0] (tab_submit) Remove dead code.
8716         (tab_title) Allocate string from the table's arena.
8717         (tab_output_text) Only free the buffer if we allocated it.
8718         (tab_submit) New function.
8719         (static vars t, d) New static vars.
8720         (tabi_table, tabi_driver, tabi_count, tabi_area, tabi_columns,
8721         tabi_headers, tabi_cumulate, tabi_render) New functions.
8722         (glob var tab_table_class) New global var.
8723
8724         * tab.h: (struct tab_join_rect) Don't use a som_rect; directly
8725         encapsulate the rectangle.  All references changed.
8726         
8727 Sun Dec 21 16:18:58 1997  Ben Pfaff  <blp@gnu.org>
8728
8729         * All header files updated to use struct tags in addition to
8730         typedefs for all structures.  Don't use word `struct' in struct
8731         tags.
8732         
8733         * Makefile.am: (pspp_SOURCES) Remove html.c.
8734         (INCLUDES) Replace the lib/* includes with a single lib/ include;
8735         all references updated.
8736
8737         * command.c: (parse_cmd) Remove call to som_check_workspace.
8738         (output_line) Update to new som.
8739
8740         * data-in.c: (parse_numeric) A single dot is not an error; it is
8741         the system-missing value.
8742
8743         * data-list.c: (dump_fixed_table, dump_free_table) Update to new
8744         som.
8745
8746         * data-out.c: Added `const' as appropriate to many prototypes.
8747         (convert_E, convert_F, convert_CCx) Take double argument instead
8748         of value * argument.
8749         (convert_format_to_string) Call changed functions appropriately.
8750         Instead of modifying the caller's value for FCAT_SHIFT_DECIMAL,
8751         make a local copy of the value.
8752
8753         * descript.q: Remove custom_variables() prototype now provided by
8754         q2c.  
8755         (custom_variables) Don't increment sbc_variables, the caller does
8756         this.
8757         (dump_z_table, display) Update to new som.
8758
8759         * error.c: (vmsg) Add const to prototype.  Remove code to handle
8760         `too many errors' condition.
8761         (check_error_count) New function.
8762         (msg) Add const to prototype.
8763
8764         * filename.c: (open_file) Rewrite for elegance.
8765
8766         * frequencies.q: Remove custom_*() prototypes now provided by q2c.
8767         (dump_full, dump_condensed, dump_statistics) Update for new som.
8768
8769         * list.q: Don't include somP.h.  Change all references to
8770         som_driver_ext to refer to the new members of som_driver.  Change
8771         som_internal_eject_page() references to outp_eject_page().
8772
8773         * main.c: (parse) Rewrite for elegance.  Add call to
8774         check_error_count().
8775
8776         * output.c: (add_class, outp_list_classes, outp_configure_driver)
8777         Rewrite or revise for new outp_driver_class_list structure.
8778         (outp_iterate_enabled_drivers) Fix comparison between disabled
8779         devices and current device type.
8780         (outp_eject_page) New function.
8781
8782         * output.h: Comment fixes.
8783         (struct outp_driver) New members driver_open, page_open, cp_x,
8784         cp_y, font_height, prop_em_width, fixed_width.  Deleted members
8785         ref_count, next.
8786         (struct outp_driver_class_list) New struct.
8787         (outp_class_list) Changed to type outp_driver_class_list; all
8788         references updated.
8789
8790         * print.c: (dump_table, print_trns_proc) Updated for new som.
8791
8792         * q2c.c: (dump_vars) Simplify array subcommand code.  Declare
8793         prototypes for custom subcommands.
8794         (dump_subcommand) Always include the `else'.
8795         (dump_parser) Fix comments in output code.
8796
8797         * set.q: Reordered functions.
8798
8799         * som-frnt.c, som-high.c, som-low.c, somP.h: Removed.
8800         
8801         * som.h: Rewritten from scratch.
8802
8803         * str.h: Remove dead code.
8804
8805         * tab.c, tab.h: New files, base implementation.
8806
8807         * sysfile-info.c: (cmd_sysfile_info, describe_variable) Update to
8808         new som.
8809
8810         * t-test.q: New code from John Williams
8811         <johnr.williams@stonebow.otago.ac.nz>.  Include math.h, cdflib.h.
8812         Many many new static vars and defines.
8813         (precalc, postcalc, g_postcalc, z_postcalc, t_pairs, t_groups,
8814         groups_calc, pairs_calc, z_dev_calc, z_calc) New functions.
8815         (struct value_list) New struct.
8816         (variance, covariance, pooled_variance, oneway, pearson_r, f_sig,
8817         t_crt, t_sig, print_t_groups) New functions.
8818         (cmd_t_test) Implemented.
8819
8820         * temporary.c: (cancel_temporary) Only free the temp_dict if it's
8821         non-NULL.
8822
8823         * vfm.c: (dump_splits) Update to new som.
8824
8825 Thu Dec  4 23:02:22 1997  Ben Pfaff  <blp@gnu.org>
8826
8827         * Makefile.am: (fiasco_SOURCES) Add html.c.
8828
8829         * aggregate.c: Base source.
8830
8831         * ascii.c: (postopen, preclose) Reformat.
8832
8833         * data-out.c, expr-evl.c: Comment fixes.
8834         
8835         * filename.c: (open_file) When opening a file for writing, use
8836         line buffering instead of full buffering for better interactive
8837         performance.  Suggested by Valerio Aimale
8838         <valerio@svpop.com.dist.unige.it>.  Also, recognize special file
8839         names `stdin', `stdout', `stderr'.
8840
8841         * groff-font.c: Comment fixes.
8842
8843         * html.c: New file; base version.
8844
8845         * list.q: (write_all_headers, clean_up, determine_layout,
8846         list_cases) Ignore `special' devices for now.  Needs to be fixed
8847         later.
8848
8849         * output.c: (outp_init) Add html driver to list; reverse list
8850         order.
8851
8852         * output.h: (struct outp_class_struct) New members `special',
8853         `submit'; comment fixes.  All references changed.
8854
8855         * postscript.c: (ps_init_driver) Make defaults for text_opt,
8856         line_opt depend on whether the OUTP_DEV_SCREEN bit is set on the
8857         device.
8858         (postopen) Comment fix.
8859         (preclose) Comment fixes, formatting fixes.  Change x->file.file
8860         references to more proper f->file.
8861
8862         * som-high.c: (som_submit_table) Special classes use their own
8863         renderers.
8864
8865         * som.h: Comment fixes.
8866
8867         * temporary.c: (new_dictionary) Don't try to xstrdup() a NULL
8868         string.
8869         
8870 Tue Dec  2 14:36:07 1997  Ben Pfaff  <blp@gnu.org>
8871
8872         * Makefile.am: (fiasco_SOURCES) Add aggregate.c back in.
8873
8874         * aggregate.c: Still working on this.
8875
8876         * command.c: (cmd_table[]) Add AGGREGATE back in.
8877         (split_words) Make '-' a legal word separator as well as ' '.
8878
8879         * main.c: Comment fixes.
8880
8881         * q2c.c: (dump_parser) Don't require the procedure's full name to
8882         be present, in the generated source.
8883
8884         * t-test.q: Change name to `t-test' from `t test'.  Let PAIRS be
8885         multiply specified and let it be default; let MISSING, CRITERIA,
8886         FORMAT be multiply specified.
8887         (cmd_t_test) Parse command name.  [DEBUGGING] Call debug_print().
8888         (custom_groups) Fix defaults.
8889         (custom_pairs) Check whether this is a PAIRS subcommand before
8890         attempting to parse.  Better garbage collection.  Proper storage
8891         allocation.
8892         [DEBUGGING] (debug_print) New function.
8893
8894         * temporary.c: Comment fixes.
8895         (copy_variable) Don't copy variable name and index.
8896         (save_dictionary) Copy variable name and index by hand.
8897
8898         * vars-atr.c: Comment fixes.
8899         (create_variable) New dictionary argument.  All references
8900         changed.
8901         (common_init_stuff) New dictionary argument.  All references
8902         changed.
8903         (init_variable) New dictionary argument.  All references changed.
8904         (dup_variable) New function.
8905
8906         * vars-prs.c: (parse_variables) If there are any errors, we always
8907         return 0.  Previously, it was possible for some types of errors to
8908         be ignored.
8909         
8910 Sat Nov 22 01:20:59 1997  Ben Pfaff  <blp@gnu.org>
8911
8912         * Makefile.am: (fiasco_SOURCES) For 0.1.5 release, remove
8913         aggregate.c.
8914
8915         * command.c: (cmd_table[]) Comment out AGGREGATE; add T TEST.
8916
8917         * list.q, t-test.q: Remove ALL option from VARLIST declaration in
8918         grammar rules.
8919
8920         * q2c.c: Comment fixes.
8921         (SBC_* enums) Remove SBC_VARLIST_ALL; all references removed.
8922         
8923         * t-test.q: (cmd_list) Rename cmd_t_test.
8924
8925         * temporary.c: (new_dictionary) Don't declare as static.
8926         
8927 Fri Nov 21 00:03:06 1997  Ben Pfaff  <blp@gnu.org>
8928
8929         * aggregate.c: Changes, still not finished.
8930
8931         * file-handle.q, frequencies.q, list.q, set.q: Comment fixes.
8932
8933         * q2c.c: Comment fixes.  Now its output is internationalized.
8934         (get_token) Fix parsing of escapes within literal strings.
8935         (main) Fix bad #line directives in output.
8936
8937         * t-test.q: Base implementation.
8938
8939         * temporary.c: (new_dictionary) New function.
8940         (restore_dictionary) [__CHECKER__] Change fill character to *
8941         (from @).
8942         
8943 Sun Nov 16 01:29:57 1997  Ben Pfaff  <blp@gnu.org>
8944
8945         * Makefile.am: (BUILT_SOURCES, fiasco_SOURCES) Add t-test.c
8946
8947         * aggregate.c: Changes, still not finished.
8948
8949         * descript.q, list.q: Comment fixes.
8950
8951         * q2c.c: Almost completely rewritten.
8952
8953         * t-test.q: New file, not complete.
8954
8955 Fri Nov 14 00:14:48 1997  Ben Pfaff  <blp@gnu.org>
8956
8957         * aggregate.c: Changes, still not finished.
8958
8959         * sort.c: (sort_cases) Call cancel_temporary() instead of doing it
8960         by hand.
8961
8962         * temporary.c: (cancel_temporary) New function.
8963
8964         * vars-atr.c: (discard_variables) Call cancel_temporary() instead
8965         of doing it by hand.
8966
8967         * vfm.c: (close_active_file) After restoring a TEMPORARY
8968         dictionary, set temp_dict to NULL.  Cancel TEMPORARY through
8969         cancel_temporary().
8970         (SPLIT_FILE_procfunc) Comment fix.
8971
8972 Tue Oct 28 16:08:45 1997  Ben Pfaff  <blp@gnu.org>
8973
8974         * Makefile.am: (fiasco_SOURCES) Add aggregate.c.
8975
8976         * aggregate.c: New file, not finished yet.
8977
8978         * command.c: (cmd_table) Add AGGREGATE.
8979
8980         * common.h: (pgm_state) Move declaration to var.h.
8981
8982         * lexer.c: (bin_value_func, oct_value_func, hex_value_func) i18n
8983         fixes.
8984         (parse_string) Message fix.
8985
8986         * recode.c: Comment fix.
8987
8988         * sfm-read.c: (read_variables) Code esthetic fixes.
8989         (write_header) Default date is `Jan', not `JAN'.
8990
8991         * sfmP.h: (bswap_int32) [!__linux__] Fix off-by-one errors.
8992
8993         * sort.c: (cmd_sort_cases) Farm the work out to new function
8994         parse_sort_variables().
8995         (parse_sort_variables) New function.
8996         (sort_cases) New function.  Cancels temporary transformations,
8997         which sorting didn't do previously.
8998         (cmd_sort_cases) Better garbage collection on error.  Uses
8999         do_external_sort().
9000         (write_initial_runs, merge_once) Improved code esthetics.
9001         (sort_stream_read) Reduced to one call to read_output_cases().
9002         (read_output_cases) New function.
9003
9004         * var-labs.c: (cmd_variable_labels) Re-enabled truncation of
9005         variable labels to 120 characters.
9006
9007         * var.h: Comment fixes.
9008         (glob var pgm_state) From common.h.
9009
9010         * vars-atr.c: (discard_variables) Set pgm_state to STATE_INIT.
9011
9012         * vars-prs.c: (parse_DATA_LIST_vars) Support PV_SINGLE in
9013         options.  Set *names to NULL on error.
9014
9015         * vfm.c: (memory_stream_init) Assert compaction_nval != 0.
9016
9017 Thu Oct  9 09:59:49 1997  Ben Pfaff  <blp@gnu.org>
9018
9019         * sfm-write.c, vfm.c: [HAVE_UNISTD] #include <unistd.h>, needed by
9020         SunOS4.  From Alexandre Oliva <oliva@dcc.unicamp.br>.
9021
9022 Wed Oct  8 18:55:24 1997  Ben Pfaff  <blp@gnu.org>
9023
9024         * vfm.c: (page_to_disk) Added missing local variables.
9025
9026 Tue Oct  7 20:23:17 1997  Ben Pfaff  <blp@gnu.org>
9027
9028         * get.c: Comment fix.
9029
9030         * sort.c: (cmd_sort_cases) Attempt to perform internal sort if the
9031         source is anything other than a disk stream, not just if it's in a
9032         memory stream.  Call page_to_disk() before external sort.
9033         (allocate_cases) Message fix.
9034
9035         * vfm.c: (prepare_for_writing) Warn user when paging workspace to
9036         disk.
9037         (page_to_disk) New function.
9038
9039 Sun Oct  5 15:56:14 1997  Ben Pfaff  <blp@gnu.org>
9040
9041         * Makefile.am: (INCLUDES) Include .. instead of $(top_srcdir).
9042
9043         * common.h: (macro strerror) Remove.  From Alexandre Oliva
9044         <oliva@dcc.unicamp.br>.
9045
9046         * get.c: (dict_delete_run) The number of variables to delete is
9047         not necessarily the number of variables that need to be shifted
9048         up.
9049         (trim_dictionary) Don't set *options to 0.  Fix bug that caused
9050         too many variables to be deleted.
9051
9052         * postscript.c: Comment fix.
9053
9054         * q2c.c: Include strerror.c.  From Alexandre Oliva
9055         <oliva@dcc.unicamp.br>.
9056
9057         * set.q: #undef ON and OFF.  From Alexandre Oliva
9058         <oliva@dcc.unicamp.br>.
9059
9060         * sfm-read.c: (sfm_read_dictionary) Don't set the file class too
9061         early, otherwise errors cause a bad free().
9062
9063         * str.h: (macro nvsprintf) s/FORMATS/FORMAT/ typo.  From Alexandre
9064         Oliva <oliva@dcc.unicamp.br>.
9065
9066         * temporary.c: (save_dictionary) Don't allocate memory if
9067         n_documents is 0.
9068
9069         * vfm.c: (memory_stream_write) Message fix.
9070
9071 Sat Oct  4 16:20:43 1997  Ben Pfaff  <blp@gnu.org>
9072
9073         * command.c: (static var cmd_table[]) Define REPEATING DATA
9074         command.
9075
9076         * common.h: Added support for broken systems that are missing
9077         EXIT_SUCCESS, EXIT_FAILURE, RAND_MAX, and/or strerror().
9078
9079         * Many source files: Replace syntax error messages via msg() with
9080         call to syntax_error().
9081
9082         * data-list.c: (dump_fixed_table) Add support for dumping table
9083         for REPEATING DATA as well as DATA LIST FIXED.
9084         (cmd_repeating_data) Allows and requires `/' between subcommands.
9085         Does proper thing with allowing rpd.starts_end to stay 0.  Allows
9086         CONTINUED specifications to be omitted.  Forces CONTINUED to be
9087         specified if ID is.  Calculates starts_end, cont_end from logical
9088         record length as reported by fhp.  Calls dump_fixed_table() if
9089         requested.  Fixed length of record copied by memcpy.
9090         (parse_num_or_var) Sets `num' to 0, not NOT_INT, for variables.
9091         Message fix.
9092         (realize_value) Returns sensible value for out-of-range variable
9093         values.
9094         (rpd_parse_record) New argument `ofs'.  Fixed confusion between
9095         length of occurrences and length of line.  Added warning for
9096         fields that exceed the line length.  Fixed infinite loop.
9097         (read_one_set_of_repetitions) Numerous minor changes for more
9098         complete SPSS compliance.  Message fixes.
9099
9100         * dfm.c: (dfm_close) If the file being closed is the inline file,
9101         read all the remaining data before closing it.
9102         (dfm_get_record) Don't close the file on lossage, as either it
9103         has been closed already or it doesn't belong to us.
9104
9105         * error.c: (puts_stdout) New function.
9106         (vmsg) Use puts_stdout instead of puts.
9107
9108         * file-handle.q: (fh_record_width) New function.
9109
9110         * inpt-pgm.c: (init_case) Fixed buffer overrun when inp_nval % 4
9111         == 0.
9112         (clear_case) Ditto.
9113         (input_program_source_read) Made an old kluge an approved method.
9114
9115         * lexer.c: (syntax_error) New function.
9116
9117         * misc.c: [BROKEN_RAND] (ansi_rand, ansi_srand; static var next)
9118         New.
9119
9120         * output.c: (oupt_get_paper_size) Message fix.
9121
9122         * q2c.c: Numerous fixes to formatting of generated code made to
9123         conform to GNU coding standards.  Uses syntax_error() in generated
9124         code.  Other miscellaneous generated message fixes.  Added support
9125         for broken systems that are missing EXIT_SUCCESS, EXIT_FAILURE,
9126         RAND_MAX, and/or strerror().
9127
9128 Sat Oct  4 02:09:56 1997  Ben Pfaff  <blp@gnu.org>
9129
9130         * data-in.c: Comment fixes.
9131
9132         * data-list.c: (struct repeating_data_trns) New member `id_spec'.
9133         (find_variable_input_spec) New function.
9134         (cmd_repeating_data) Initializes id_spec.
9135         (rpd_parse_record) Implemented.
9136         (read_one_set_of_repetitions) Returns -3 by default in order to
9137         kluge out some potential bugs.
9138
9139         * data-out.c: Comment fixes.
9140
9141         * file-type.c: (internal_cmd_record_type) Message fix.
9142
9143         * inpt-pgm.c: (input_program_source_read) Special temporary kluge
9144         for handling -3 return value.
9145
9146 Sat Sep 20 23:58:15 1997  Ben Pfaff  <blp@gnu.org>
9147
9148         * data-list.c: Comment fixes.
9149         (struct dls_var_spec) Reordered members.
9150         (read_from_data_list_fixed) Restructured.
9151         (struct repeating_data_trns) Reordered members.  Renamed `starts'
9152         as `starts_beg', `ends' as `starts_end'.
9153         (cmd_repeating_data) Calculates length of repeated data if
9154         necessary and possible.
9155         (parse_num_or_var) Don't allow string variables.
9156         (realize_value) New function.
9157         (rpd_msg) New function.
9158         (rpd_parse_record) New function.  Currently stubbed out.
9159         (read_one_set_of_repetitions) Implemented.
9160
9161         * inpt-pgm.c: (input_program_source_read) Comment fix.
9162
9163 Thu Sep 18 21:34:57 1997  Ben Pfaff  <blp@gnu.org>
9164
9165         * command.c: (cmd_end_repeat_p) Removed.
9166         (init_cmd_parser) Doesn't set cmd_end_repeat_p.
9167         (parse_cmd_name) Removed.
9168
9169         * data-list.c: Comment fixes.
9170         (data_list_pgm) Removed `eof' member.
9171         (static var first) New var.
9172         (cmd_data_list) Sets `first'.  Ensures that DATA LIST uses the
9173         FILE TYPE file inside FILE TYPE structures.
9174         (append_var_spec) Appends to *first, not dls.spec.
9175         (parse_fixed) Message fixes.
9176         (struct rpd_num_or_var) New.
9177         (struct repeating_data_trns) New.
9178         (static var rpd) New.
9179         (cmd_repeating_data) New function.
9180         (parse_num_or_var) New function.
9181         (parse_repeating_data) New function.
9182         (read_one_set_of_repetitions) New function.
9183
9184         * file-type.c: (cmd_file_type) Message fixes.  Always
9185         default_handle to FILE TYPE file handle.
9186         (internal_cmd_record_type) Message fixes.
9187
9188 Wed Aug 20 14:22:03 1997  Ben Pfaff  <blp@gnu.org>
9189
9190         * repeat.c: Comment fix.  Disable debugging.
9191
9192         * temporary.c: (restore_dictionary) Sets splits to NULL and
9193         n_splits to 0 before destroying the variables because now doing
9194         this tries to remove split variables.
9195
9196         * vars-atr.c: (discard_variables) Asserts that n_splits is 0 after
9197         destroying the dictionary.
9198         (clear_variable) Removes a variable from splits after destroying
9199         it.
9200
9201 Mon Aug 18 18:06:55 1997  Ben Pfaff  <blp@gnu.org>
9202
9203         * cmdline.c: (set_compat) Removed.
9204         (pick_compat) Removed.
9205         (parse_command_line) Removed -c option.
9206         (pre_syntax_message) Removed -c option.
9207         (usage) Remove compatibility code.
9208
9209         * common.h: (macros VER_PC, VER_WND, VER_X) Removed.
9210         (glob var compat) Removed.
9211
9212         * compute.c: (type_check) Fixed messages about type mismatches.
9213
9214         * data-list.c: (cmd_data_list) Removed compatibility code.
9215         (fixed_parse_compatible) Calls convert_negative_to_dash().
9216         Fixed bug where it only set the variable in fx.spec if it created
9217         the variable itself.
9218         (dump_fmt_list) Spelling fix.
9219         (cut_field) Removed compatibility code.
9220
9221         * dfm.c: (cmd_begin_data) Don't require a command terminator on
9222         BEGIN DATA command.
9223
9224         * expr-evl.c: (evaluate_expression) Implement LAG.
9225
9226         * expr-prs.c: (parse_add) Calls convert_negative_to_dash().
9227         (parse_neg) Calls convert_negative_to_dash().
9228         (LAG_func) Increases n_lag to the lag requested.  Fixed assignment
9229         bug.
9230
9231         * expr.h: (struct expression_struct) Removed member max_lag.
9232
9233         * file-type.c: (parse_col_spec) Calls convert_negative_to_dash().
9234         (internal_cmd_record_type) Removed special handling to produce
9235         negative numbers from dash tokens.
9236
9237         * getline.c: (static var DO_REPEAT_level) New var.
9238         (getl_add_DO_REPEAT_file) Increments DO_REPEAT_level.
9239         (handle_line_buffer) Copies the line into getl_buf; doesn't call
9240         copy_with_DO_REPEAT_substitutions().
9241         (getl_read_line) Maintains value of getl_mode.  Calls
9242         perform_DO_REPEAT_substitutions() whenever DO_REPEAT_level is
9243         positive.
9244         (getl_close_file) Decrements DO_REPEAT_level when appropriate.
9245
9246         * getline.h: (getl_mode) New glob var.
9247
9248         * glob.c: Comment fixes.
9249         (init_glob) Restructured.  Sets set_seed.
9250         (init_compat_dependent) Removed.  All references removed.
9251         (get_date) Format changed from MM/DD/YY to DD MMM YYYY.
9252         (__htonl, __htons) Removed.  (What were these for?)
9253
9254         * lexer.c: (static var tbl) Dash set to class CNUM.
9255         (make_hexit) New function from data-out.c.
9256         (get_token_representation) Rewritten.
9257         (convert_negative_to_dash) New function.
9258         (lex_init_compat_dependent) Removed.
9259         (yylex) A dash is parsed as part of a number if it is followed by
9260         a digit.  The ASCII representation of a number is copied to
9261         tokstr.  String parsing farmed out to parse_string().  Comment
9262         fixes.
9263         (bin_value_func, oct_value_func, hex_value_func, parse_string) New
9264         functions.
9265         (preprocess_line) Line processing depends on interactive/batch
9266         mode, not on compatibility mode.  Removed PC+ compatibility code.
9267
9268         * loop.c: (loop_3_trns_proc) Comment fix.
9269
9270         * main.c: Remove dead code.
9271         (main) Remove call to init_compat_dependent().
9272
9273         * misc.c: (convert_fmt_ItoO) Make E format conversion more
9274         conformant.
9275
9276         * print.c: (parse_string_argument) Calls
9277         convert_negative_to_dash().
9278         (fixed_parse_compatible) Calls convert_negative_to_dash().
9279
9280         * repeat.c: (RPT_* defines) Removed.
9281         (struct rpt_numeric) Removed.
9282         (struct repeat_entry) New member type, changed `replacement' from
9283         char * to char **.
9284         (clean_up) Deallocation adapted to new repeat_entry.
9285         (internal_cmd_do_repeat) `type' defaults to 0.  Remove lookahead()
9286         usage.  Creates vars for `type' of 1.
9287         (parse_ids) Sets type of 1.  Adapted to new repeat_entry.
9288         (store_numeric) Rewritten, new interface.
9289         (parse_numbers) Rewritten.
9290         (parse_strings) Rewritten.
9291         (find_DO_REPEAT_substitution) New function.
9292         (perform_DO_REPEAT_substitutions) New function.
9293         (copy_with_DO_REPEAT_substitutions) Removed.
9294         (debug_print) Rewritten.
9295
9296         * set.q: Comment fix.
9297         (custom_results) Removed compatibility code.
9298         (internal_cmd_set) Removed SET EMULATION subcommand.  Removed
9299         compatibility code.
9300
9301         * sysfile-info.c: (cmd_display) Removed compatibility code.
9302
9303         * tokens.h: Comment fixes.
9304         (token types enum) Removed `toktype' typedef name for this int
9305         type.  Removed SUBST.  Restructured.
9306
9307         * vars-atr.c: (discard_variables) Sets n_lag to 0.
9308
9309         * vars-prs.c: Comment fix.
9310
9311         * vfm.c: Comment fixes.
9312         (glob var n_lag) New var.
9313         (static vars lag_count, lag_head, lag_queue) New vars.
9314         (procedure) Removed argument nlag.
9315         (setup_lag) New function.
9316         (close_active_file) Discards lagging state.
9317         (lag_case) New function.
9318         (lagged_case) New function.
9319         (write_case) Lags a case if lagging.
9320
9321         * weight.c: (cmd_weight) Removed compatibility code.
9322         
9323 Sun Aug 17 22:34:40 1997  Ben Pfaff  <blp@gnu.org>
9324
9325         * getline.h: (struct getl_script) New members loop_index, macros.
9326
9327         * getline.c: (getl_add_file) Sets first_line field to NULL.
9328         (getl_add_DO_REPEAT_file) New function.
9329         (handle_line_buffer) When the current line's length is negative,
9330         set the filename and line number.  Increment line number after
9331         reading line.  Pass the line to
9332         copy_with_DO_REPEAT_substitutions() for processing.
9333         (getl_close_file) Free DO REPEAT lines before freeing the
9334         filename, and just set the filename to NULL when doing this,
9335         because otherwise the filename gets freed twice.
9336
9337         * glob.c: (glob var queuing) Removed.  All references removed.
9338
9339         * lexer.c: Comment fixes.
9340         (get_token_representation) New function.
9341
9342         * repeat.c: Comment fixes.
9343         (struct repeat_entry) Replaced type and v union members with a
9344         simple string.
9345         (append_record) New function.
9346         (internal_cmd_do_repeat) Started reforming it for the new
9347         repeat_entry struct.  Properly records filename changes in the
9348         getl_line_buf.  Fixed improper use of = for ==.  Fixed sense of
9349         strncasecmp() result usage.  Uses append_record() to simplify.
9350         Properly discards END REPEAT line.  Calls getl_add_DO_REPEAT_file
9351         to add in the file.
9352
9353         (copy_with_DO_REPEAT_substitutions) Started coding.
9354
9355         [DEBUGGING] (debug_print_lines) New function.
9356
9357         * set.q: (custom_results, internal_cmd_set) s/VER_PCP40/VER_PC/;
9358
9359         * tokens.h: (macro is_id1, is_idn) New macros.
9360
9361 Sat Aug 16 10:57:41 1997  Ben Pfaff  <blp@gnu.org>
9362
9363         * cmdline.c: (static var pre_syntax_message) Changed `win'
9364         compatibility mode to `wnd'.
9365
9366         * data-list.c: (fixed_parse_spss) Renamed
9367         fixed_parse_compatible().
9368
9369         * glob.c: (init_glob) Excise unused code for
9370         program_invocation_short_name.
9371
9372         * lexer.c: (preprocess_line) Leading indentors are ignored in Wnd
9373         as well as in X.
9374
9375         * print.c: (fixed_parse_spss) Renamed fixed_parse_compatible().
9376
9377         * set.q: `win' compatibility renamed `wnd'.
9378
9379 Thu Aug 14 22:11:12 1997  Ben Pfaff  <blp@gnu.org>
9380
9381         * filename.c: [__WIN32__] Change the included Windows header files
9382         (again).
9383         (absolute_filename_p) [__MSDOS__] A filename with a colon as the
9384         second character is absolute.
9385         (dirname) Fix logic error.  Don't printf() the results.
9386         (prepend_dir) Don't printf() the results.
9387
9388         * getline.c: (handle_line_buffer) New function.
9389         (getl_read_line) Reads line with handle_line_buffer() when
9390         appropriate.
9391         (getl_close_file) Discard line buffer data.
9392
9393         * getline.h: Comment fixes.
9394         (struct getl_line_list) New struct.
9395         (getl_script_struct) Added line buffer members.  These are hooks
9396         for use by DO REPEAT to allow it to insert virtual source code
9397         into the program.
9398
9399         * glob.c: (init_glob) [__DJGPP__ || (__WIN32__ && __BORLANDC__)]
9400         Override Borland C++ stupidity that claims Windows has a console
9401         window size of 0x3.
9402
9403         * repeat.c: This is in the process of being restructured from
9404         using a token-buffering approach to the DO REPEAT facility to
9405         using the more flexible approach of a line-buffering approach in
9406         conjunction with the getline module.  Comment fixes.
9407         (struct tok_struct) Removed.
9408         (static vars queue_index, queue_head, queue) Removed.
9409         (static vars line_buf_head, line_buf_tail) New vars.
9410         (internal_cmd_do_repeat) Instead of queuing tokens, queue lines.
9411         Not complete.
9412         (pull_queue, destroy_queue) Removed.
9413         [DEBUGGING] (debug_print_tokens) Removed.
9414
9415 Tue Aug  5 13:57:58 1997  Ben Pfaff  <blp@gnu.org>
9416
9417         * file-handle.q: (prepend_current_directory) New function.
9418         (internal_cmd_file_handle, fh_get_handle_by_filename) Prepends
9419         current directory before normalizing filename.
9420
9421         * filename.c: (gnu_getcwd) New function.
9422         (absolute_filename_p) New function.
9423         (search_path) New argument, PREPEND.  All references changed to
9424         pass NULL except those explicitly mentioned.  Uses
9425         absolute_filename_p().  Prepends PREPEND before trying the
9426         filename.
9427         (dirname, prepend_dir) New functions.
9428
9429         * getline.c: (getl_get_current_directory) New function.
9430         (getl_include) Passes getl_get_current_directory() as PREPEND arg
9431         to search_path().
9432                 
9433 Sun Aug  3 11:42:36 1997  Ben Pfaff  <blp@gnu.org>
9434
9435         * In several source files, the term `script' was replaced with
9436         `syntax file' inside error messages.  Usage of the term `script'
9437         in the sense of a syntax file is now deprecated.
9438
9439         * cmdline.c: (static vars pre_syntax_message, post_syntax_message)
9440         Updated messages.
9441
9442         * dump-sysfile.c: (usage) Update message.
9443
9444         * getline.c: (getl_read_line) Ignore lines beginning with `#!'.
9445
9446         * getline.h: (glob var getl_include_path) Declare extern.
9447
9448         * list.q: Define EXTERN as extern before #including somP.h.
9449
9450         * var.h: Remove declaration of `disptype' variable.
9451
9452         * vfm.c: (close_active_file) After switching the data sink to a
9453         data source, set vfm_sink to NULL, because it doesn't exist any
9454         more.
9455
9456 Thu Jul 17 21:41:44 1997  Ben Pfaff  <blp@gnu.org>
9457
9458         * glob.c: [__BORLANDC__] Include math.h.  Define _matherr() and
9459         _matherrl() to ignore all math errors.
9460
9461         * sfm-read.c: (read_value_labels) When reading the labels from
9462         disk, read the little parts separately instead of as a struct;
9463         this avoids alignment problems.
9464
9465         * sfm-write.c: (struct sfm_fhuser_ext) New member `elem_type'.
9466         (sfm_write_dictionary) Sets elem_type and frees it on lossage.
9467         (write_header) Allocates and initializes elem_type.
9468         (sfm_write_case) Uses elem_type to determine how to handle each
9469         flt64 element.
9470         (sfm_close) Frees elem_type.
9471
9472         * sfmP.h: Comment fix.
9473         [__BORLANDC__] Uses #pragma -a to adjust structure member
9474         alignment.
9475         
9476 Thu Jul 17 01:55:12 1997  Ben Pfaff  <blp@gnu.org>
9477
9478         * Makefile.am: (fiasco_SOURCES) Remove display.c.
9479
9480         * common.c: Fix typo.
9481
9482         * dfm.c: (read_record) Remove strncasecmp() emulation and fix the
9483         sense of the condition.
9484
9485         * expr-evl.c: (macro ALLOC_STRING_SPACE) [!PAGED_STACK] Add
9486         line-continuation backslash.
9487
9488         * filename.c: [__WIN32__] Include <windef.h> before <winbase.h>.
9489
9490         * frequencies.q: (custom_grouped, add_percentile) Don't use a
9491         non-constant expression as an argument to sizeof.
9492
9493         * glob.c: [__WIN32__ && __BORLANDC__] When including <conio.h>,
9494         undefine gettext macro because that's a conio function.
9495
9496         * hash.h: (hsh_prime_tab declaration) Remove.
9497
9498         * list.q: (write_fallback_headers) Move `leader' allocation out of
9499         main loop.  Change to local_alloc() allocation.
9500
9501         * output.h: Formatting fixes.  Put __attribute__ in right place on
9502         function prototypes.
9503
9504         * sfm-read.c: (read_machine_flt64_info, read_variables) Change
9505         incorrect `SECOND_LOWEST_VALUE' references to proper
9506         `second_lowest_value'.
9507
9508         * som-frnt.c: (EXTERN macro) Define as `extern' instead of null
9509         value.  This way 2 out of 3 of the som files define the vars
9510         extern, the correct way, that actually works under BC++.
9511         (som_set_float) Don't use nonconstant initializers for a struct.
9512
9513         * som-high.c: Add the standard alloca() header.
9514         (replicate_table) Add prototype.
9515
9516         Merged DISPLAY routine.
9517         * sysfile-info.c: (AS_*) New enum series.
9518         (cmd_sysfile_info) Gutted.  Calls describe_variable() to do the
9519         dirty work.
9520         (cmd_display, display_macros, display_documents,
9521         display_variables) Stolen from defunct display.c.
9522         (describe_variable) New function.
9523
9524         * temporary.c: [0] (display_tree) New debug function.
9525         (copy_variable) Performs shallow copy of value labels instead of
9526         deep copy; i.e., just copys the AVL tree and increments the
9527         reference counts.
9528
9529         * val-labs.c: Comment fixes.
9530         (do_value_labels) Optionally skip leading forward slash.
9531         (get_label) Creates only a single value label instead of many
9532         copies of one, and sets the reference count.
9533
9534         * display.c: Removed.
9535
9536         * dump-sysfile.c: New file, not yet complete.
9537
9538 Fri Jul 11 23:02:18 1997  Ben Pfaff  <blp@gnu.org>
9539
9540         For lots of source files I added more verbose_msg's.  These aren't
9541         listed below as they have tested as being benign.  In some cases
9542         these replaced debug_printf() calls.
9543
9544         * output.c: (outp_read_devices) Message fix.
9545
9546         * postscript.c: (output_encodings) Message fix.  Reports errors on
9547         fclose().
9548         (postopen) Message fix.
9549         
9550 Fri Jul 11 14:09:40 1997  Ben Pfaff  <blp@gnu.org>
9551
9552         * dfm.c: (dfm_close) Don't call fclose() for a NULL FILE.
9553
9554         * filename.c: (close_file_ext) Set f->file to NULL *after* closing
9555         it.
9556
9557         * main.c: Remove <malloc.h> #include.
9558
9559         * mis-val.c: (parse_numeric) Set .f member for each missing[]
9560         instead of trying to just set the missing[] itself, which is a
9561         gcc-specific idiom.
9562
9563         * sfm-read.c: (read_variables) Same.
9564
9565         * str.h: Add memmem() prototype.
9566
9567         * val-labs.c, var-labs.c: Replace <malloc.h> with <stdlib.h>.
9568
9569 Thu Jul 10 22:13:53 1997  Ben Pfaff  <blp@gnu.org>
9570
9571         * Makefile.am: (q2c) Don't include any libraries in the link.
9572
9573         * dfm.c: (force_line_buffer_extension) New macro.
9574         (count_tabs) New function.
9575         (tabs_To_spaces) New function.
9576         (read_record) Calls tabs_to_spaces() on the line being processed.
9577
9578         * q2c.c: Disabled i18n for this proglet so that libintl.a doesn't
9579         have to be compiled twice (once for CC, once for LOCAL_CC).
9580  
9581 Sun Jul  6 19:14:33 1997  Ben Pfaff  <blp@gnu.org>
9582
9583         * Makefile.am: (INCLUDES) Add intl directory; fix directories.
9584         (LDADD) Add @INTLLIBS@.
9585         (q2c) Add LIBS, @INTLLIBS@ to link step.
9586
9587         * inpt-pgm.c: Turn off debugging.
9588
9589         * postscript.c: (postopen) Format fix.  local_free() blocks
9590         returned by local_alloc(); don't free() them.
9591
9592 Sat Jul  5 23:44:51 1997  Ben Pfaff  <blp@gnu.org>
9593
9594         * data-in.c: (parse_string_as_format) Comment fix.  Fix check for
9595         string length.
9596
9597         * data-list.c: (read_from_data_list_fixed) Pass proper value for
9598         LEN arg, not simply the full string length.
9599
9600         * sort.c: (allocate_file_handles) Check SPSS compatible temp file
9601         directories before generic temp file directories.
9602
9603         * vfm.c: Disable debugging.
9604
9605 Fri Jul  4 13:26:41 1997  Ben Pfaff  <blp@gnu.org>
9606
9607         * get.c: Comment fix.
9608         (cmd_save_internal) Always passes GTSV_OPT_SAVE option.
9609
9610 Wed Jun 25 22:52:28 1997  Ben Pfaff  <blp@gnu.org>
9611
9612         * expr-prs.c: (debug_print_postfix) Conditionally included on
9613         GLOBAL_DEBUGGING.  Removed out_header() reference.
9614
9615         * exprP.h: Removed #undef GLOBAL_DEBUGGING.
9616
9617 Sun Jun 22 22:00:28 1997  Ben Pfaff  <blp@gnu.org>
9618
9619         * ascii.c: Removed obsolete ascii_close_page() prototype.
9620
9621         * command.c: (output_line) Comment fix.
9622
9623         * data-in.c: Formatting fix.
9624         (parse_string_as_format) Now the `fc' argument is used only for
9625         the purpose of error messages; it is not an index into the string
9626         passed.  All references changed.
9627
9628         * data-list.c: Comment fix.
9629         (cut_field) Comment fix.  Now returns the column number of the
9630         position of the field cut out on success.
9631         (parse_field) Added `column' argument.  Puts the column numbers in
9632         the error message.
9633         (read_from_data_list_free, read_from_data_list_list) Record the
9634         column number returned by cut_field(), pass it to parse_field().
9635
9636         * dfm.c: Comment fix.
9637
9638         * do-ifP.h: Comment fix.
9639
9640         * expr-prs.c: (SYSMIS_func) Implemented string-type arguments for
9641         the SYSMIS function.
9642
9643         * expr.h, exprP.h: Comment fix.
9644
9645         * glob.c: (init_glob) Only calls setlocale() and family if
9646         ENABLE_NLS set.
9647
9648         * hash.h: Comment fix.
9649
9650         * include.c: Comment fix.
9651
9652         * output.c: Comment fix.
9653
9654         * postscript.c: (ps_line_intersection) Simplified assertion.
9655
9656         * repeat.c: Comment fix.
9657
9658         * vars-atr.c: Comment fix.
9659
9660         * vars-prs.c: Comment fix.
9661
9662         * vfm.c: (vector_initialization) [DEBUGGING] Fixed undefined
9663         behavior with usage of postincrement.
9664         (memory_stream_read) Discards cases as it goes. 
9665
9666 Sun Jun 15 16:45:17 1997  Ben Pfaff  <blp@gnu.org>
9667
9668         * Makefile.am: Cleans q2c, not just distcleans it.  Distcleans
9669         foo.
9670
9671         * Most source files: Includes debug-print.h, related comment
9672         fixes.
9673
9674         * cases.c: (alloc_val) Removed complex allocation code.  Merely
9675         increments default_dict.nval and returns the former value.
9676         (envector, devector) Removed references to lv member of struct
9677         variable.
9678
9679         * common.h: (macro VME) Replaced complex definition with simple
9680         one.
9681
9682         * data-list.c: (cmd_data_list) Sets vfm_source instead of
9683         read_active_file and cancel_input_pgm.
9684         (read_from_data_list, cancel_data_list) Removed.
9685         (data_list_source_read, data_list_source_destroy_source) New
9686         functions.
9687         (glob var data_list_source) New var.
9688
9689         * dfm.c: (open_file_r, open_file_w) Simplified debug output.
9690         (cmd_begin_data) Improved criteria for an input program accessing
9691         the inline file.  Still not perfect.
9692
9693         * do-if.c: (do_if_trns_proc) Simplified debug output.
9694
9695         * expr-prs.c: Comment fixes.
9696         [DEBUGGING] (debug_print_postfix) Simplified debug output.
9697
9698         * file-handle.q: (fh_close_handle) Simplified debug output.
9699
9700         * file-type.c: Comment fixes.
9701         (cmd_file_type) Sets vfm_source instead of read_active_file and
9702         cancel_input_pgm.
9703         (cmd_end_file_type) On failure, discards variables in place of
9704         just canceling the input program.
9705         (read_from_file_type) Renamed file_type_source_read.
9706         (cancel_file_type) Renamed file_type_source_destroy_source.
9707         (glob var file_type_source) New var.
9708
9709         * get.c: (GTSV_* enum series) New enums GTSV_OPT_SAVE, GTSV_NONE.
9710         (cmd_get) Initializes options to GTSV_NONE before passing to
9711         trim_dictionary().  Removed `lv' reference.  Sets vfm_source
9712         instead of read_active_file and cancel_input_pgm.
9713         (cmd_save_internal) Initializes options before passing to
9714         trim_dictionary().  Local var `nval' removed.
9715         (dict_delete_run) Comment fixes.
9716         (trim_dictionary) Comment fixes.  Disallows scratch variables if
9717         GTSV_OPT_SAVE set in options.
9718         (read_from_get) Renamed get_source_read.
9719         (cancel_get) Renamed get_source_destroy_source.
9720         (glob var get_source) New var.
9721
9722         * inpt-pgm.c: (cmd_input_program) Sets vfm_source instead of
9723         read_active_file and cancel_input_pgm.
9724         (read_from_input_program) Renamed input_program_source_read.
9725         Simplified debug output.
9726         (cancel_input_program) Renamed
9727         input_program_source_destroy_source.
9728         (glob var input_program_source) New var.
9729
9730         * loop.c: (loop_1_trns_proc) Simplified debug output.
9731
9732         * main.c: (dump_token) Made eof output more explicit.
9733
9734         * sfm-read.c: (read_variables, dump_dictionary) Removed `lv'
9735         references.
9736
9737         * sort.c: (cmd_sort_cases) Disallows scratch variables.  Removed
9738         code for always-memory or always-disk cases.  malloc's case-list
9739         based on vfm_source_info.ncases.  Explicit support for
9740         memory_stream via memory_source_cases.
9741         (do_external_sort) Sets vfm_source instead of read_active_file and
9742         cancel_input_pgm.
9743         (allocate_file_handles) The temporary directory permissions are
9744         set to 0700 instead of 0777.
9745         (allocate_cases) Formatting fixes.  Simplified debug output.
9746         (output_record) Compacts the case if necessary before writing it
9747         out.
9748         (close_handle, open_handle_w) Simplified debug output.
9749         (write_initial_runs) Destroys vfm_sink, then sets it to
9750         sort_stream.  Writes records to memory based on
9751         vfm_sink_info.case_size.
9752         (write_to_sort_cases) Renamed sort_stream_write().
9753         (merge) Simplified error handling.  Simplified debug output.
9754         Formatting fixes.
9755         (read_from_external_sort) Renamed sort_stream_read().
9756         Reads records based on vfm_source_info.case_size.
9757         (sort_stream_write) Writes records to memory based on
9758         vfm_sink_info.case_size.
9759         (sort_stream_mode) New function.
9760         (glob var sort_stream) New variable.
9761
9762         * temporary.c: (cmd_temporary) Simplified debug output.
9763         (copy_variable) Removed references to `lv'.
9764
9765         * title.c: (get_title) Simplified debug output.
9766
9767         * var.h: Comment fixes.
9768         (struct get_proc) Removed member `lv'.
9769         (struct variable) Removed member `lv'.  Comment fixes.
9770         (glob vars read_active_file, write_active_file, cancel_input_pgm)
9771         Removed.
9772         (struct case_stream) New.
9773
9774         * vars-atr.c: (discard_variables) Changed cancel_input_pgm,
9775         read_active_file references to use vfm_source.
9776         (init_variable, replace_variable) Removed references to `lv'.
9777
9778         * vfm.c: Comment fixes.
9779         (glob var vfm_source, vfm_sink, vfm_source_info, vfm_sink_info)
9780         New variables.
9781         (static var queue, qh, qt, n_lag) Removed.  All references
9782         removed.
9783         (glob var compaction_necessary, compaction_nval, compaction_case,
9784         paging) New variables.
9785         (record_case) Removed.
9786         (procedure) Comment fixes.  Calls vfm_source->read() instead of
9787         read_active_file().
9788         (lag) Removed.
9789         (prepare_for_writing, arrange_compaction, make_temp_case,
9790         vector_initialization, setup_filter) New function.
9791         (open_active_file) Most of the code moved into the abovementioned
9792         new functions.  Now sets temp_dict to &default_dict if there is no
9793         temporary dictionary, for convenience.  New debug output.
9794         (close_active_file) Deals with changing the sink to the source.
9795         Calls finish_compaction().  Frees compaction_case.  Mostly
9796         rewritten.
9797         (glob vars disk_source_file, disk_sink_file) New vars.
9798         (destroy_active_file, read_from_memory) Removed.
9799         (disk_stream_init, disk_stream_read, disk_stream_write,
9800         disk_stream_mode, disk_stream_destroy_source,
9801         disk_stream_destroy_sink) New functions.
9802         (glob var vfm_disk_stream) New var.
9803         (glob vars memory_source_cases, memory_sink_cases,
9804         memory_sink_iter, memory_sink_max_cases) New vars.
9805         (memory_stream_init, memory_stream_read, memory_stream_write,
9806         memory_stream_mode, memory_stream_destroy_source,
9807         memory_stream_destroy_sink) New functions.
9808         (glob var vfm_memory_stream) New var.
9809         (write_case) Local var `i' renamed `cur_trns'; local var `retval'
9810         named `more_cases'.  Simplified debug output.  Otherwise mostly
9811         rewritten.
9812         (record_case) Moved into the stream drivers.  Removed.
9813         (transform) Removed (was dead code).
9814         (SPLIT_FILE_procfunc) s/vfm_replacement/vfm_sink_info/.  In the
9815         common case that the splits don't change, we don't need to copy
9816         the case into prev_case again--pointless.
9817         (compact_case) New function.
9818         (finish_compaction) New function.
9819
9820         * vfmP.h: Comment fixes.
9821         (DEV_* enum series) Removed. 
9822         (struct storage) Renamed `stream_info'.  Removed variant record.
9823         Removed `device' member.
9824
9825         * debug-print.h: New file.
9826         
9827 Sun Jun  8 01:12:38 1997  Ben Pfaff  <blp@gnu.org>
9828
9829         * autorecode.c: Turned off debugging.
9830
9831         * data-list.c: (destroy_dls) Closes the associated file handle.
9832
9833         * descript.q: (custom_variables) Added PV_NO_SCRATCH to
9834         parse_variables() options.
9835
9836         * dfm.c: (open_file_r) Removed gratuituous argument to msg() call.
9837
9838         * display.c: (display_variables) Really fixed null cell bug.
9839
9840         * file-handle.q: (fh_close_handle) Changed debugging message.
9841
9842         * frequencies.q: (custom_variables) Added PV_NO_SCRATCH to
9843         parse_variables() options.
9844
9845         * list.q: Added PV_NO_SCRATCH in q2c varlist options.
9846         (cmd_list) Fails if no variables specified.
9847         (determine_layout) Writes blank lines manually.
9848
9849         * loop.c: (loop_1_trns_proc) Made debugging code only print
9850         messages if debugging.
9851
9852         * q2c.c: (dump_subcommand) Appends sbc->message to SBC_VARLIST
9853         parse_variables() arguments.
9854         (main) Parses optional parenthesized options to varlist
9855         subcommands into sbc->message.
9856
9857         * sfm-read.c: Format fix.
9858
9859         * var.h: (FV_*) New enum series.
9860         (PV_*) New enum PV_NO_SCRATCH.
9861
9862         * vars-prs.c: (find_var) Removed.
9863         (fill_all_vars) Takes FV_* enum instead of boolean third
9864         argument.  Rewritten to deal with scratch as well as system
9865         variables.
9866         (parse_variables) Error message on scratch variable if
9867         PV_NO_SCRATCH set.
9868
9869         * vfm.c: (static var virt_begin_func) New var.
9870         (procedure) Sets up virt_begin_func.
9871         (SPLIT_FILE_procfunc) For the first case, calls virt_begin_func()
9872         after dump_splits().  For succeeding groups changes, calls
9873         virt_begin_func() instead of begin_func().      
9874
9875 Fri Jun  6 22:42:23 1997  Ben Pfaff  <blp@gnu.org>
9876
9877         * count.c, data-out.c, file-handle.q, list.q, loop.c: Turned off
9878         debugging.
9879
9880         * dfm.c: Added some debugging messages, disabled by default.
9881         (open_file_r) Fixed error message.
9882         (read_record) On eof on inline_file, instead of calling
9883         fh_close_handle(), simply jump to eof label like a normal file.
9884         Message fixes.
9885
9886         * display.c: Thin lines between rows for certain kinds of
9887         listing.  Fixed `null cell' bug.
9888
9889         * error.c: (failure) Flush stdout, stderr before failing.
9890
9891         * file-handle.q: (fh_close_handle) Added debugging message.
9892
9893         * frequencies.q: (dump_full) Bottom line extends across entire
9894         table width.  Changed title formatting.
9895         (dump_condensed) Changed title formatting.
9896         (dump_statistics) Fixed title formatting.
9897
9898         * glob.c: (init_glob) Moved initialization of cur_proc out of #if.
9899         Sets default value of set_format.
9900
9901         * list.q: (cmd_list) Calls blank_line() before determine_layout().
9902         Passes write_all_headers() to procedure() as pre-group func.
9903         (write_all_headers) New function.
9904         (determine_layout) Removed calls to write_header().
9905         Calls blank_line() before and after write_fallback_headers().
9906
9907         * recode.c: (recode_trns_free) Only attempts to free head->map if
9908         non-NULL.
9909
9910         * sfm-read.c: (read_variables) Allows `#' at beginning of system
9911         file variable names but gives a warning.  Sets `left' based on
9912         first character being/not being `#'.  On lossage frees dict->var.
9913
9914         * som-high.c: (som_draw_title) Simplified title formatting.
9915
9916         * vfm.c: (dump_splits) Fixed and changed splits formatting.
9917
9918 Thu Jun  5 22:51:15 1997  Ben Pfaff  <blp@gnu.org>
9919
9920         * autorecode.c: (cmd_autorecode) Sets h_trans to NULL at
9921         beginning.  Frees v_src, v_dest on successful exit.  Frees
9922         h_trans[*], h_trans on lossage.
9923         (recode) Frees h_trans[*], h_trans.
9924
9925         * dfm.c: (dfm_close) Formatting change.
9926         (open_inline_file) Now passed a dfm_fhuser_ext to initialize; no
9927         longer allocates its own in inline_file.
9928         (open_file_r) Passes the local dfm_fhuser_ext to
9929         open_inline_file().
9930         (open_file_w) Message fix. 
9931         (read_record) Buffer reallocation strategy changed.  Frees
9932         ext->line even in inline_file to prevent leaks.
9933         (dfm_put_record) Fixed bug where `ext' was cached before the file
9934         was opened and thus it would be NULL when the file really was
9935         open.
9936         (cmd_begin_data) Sets up inline_file basics itself, then calls
9937         open_inline_file() for the dfm_fhuser_ext.  Formatting fix.
9938
9939         * list.q: (write_line) Formatting fix.
9940         (clean_up) Minor strategy change.  Sets proportional font after
9941         finishing cleanup.
9942         (determine_layout) Sets fixed font before writing regular headers,
9943         or after writing fallback headers.
9944
9945         * modify-vars.c: (cmd_modify_vars) Frees variable lists for DROP
9946         and KEEP vars after using them.
9947
9948         * postscript.c: (ps_init_driver) Frees x->family.
9949         (postopen) When loading fonts, free the temporary font name buffer
9950         after using it.
9951         (ps_text_set_font_by_position) Free temporary font name buffer
9952         after using it.
9953         (text) Fixed code that calculated `lig' so that `lig' always gets
9954         initialized.  Formatting fix.
9955
9956         * som-low.c: (get_cell_size, som_get_table_size) `prop_height' ->
9957         `font_height'.
9958         [GLOBAL_DEBUGGIGN] (check_table) Use arena_alloc() to allocate
9959         cells, not xmalloc(), so that the cells will get destroyed
9960         automatically.
9961
9962         * sysfile-info.c: (cmd_sysfile_info) Frees the dictionary after
9963         using it.
9964
9965 Tue Jun  3 23:33:22 1997  Ben Pfaff  <blp@gnu.org>
9966
9967         * ascii.c: (ascii_text_draw) Always sets metrics for strings that
9968         are drawn.
9969
9970         * dfm.c: Comment fix.
9971
9972         * list.q: Comment fixes.  Include somP.h.  Removed static vars
9973         table, n_columns, n_rows, part.  New struct list_ext.  New static
9974         var line_buf.
9975         (n_lines_remaining, n_chars_width, write_line) New functions.
9976         (cmd_list, list_cases) Rewritten.
9977         (begin_row, end_row, flush_table) Removed.
9978         (write_header, clean_up, write_varname, write_fallback_headers,
9979         determine_layout) New functions.
9980
9981         * output.c: (outp_iterate_enabled_drivers) Minor reformat.
9982
9983         * output.h: Comment fix.
9984
9985         * postscript.c: Comment fix.
9986         (struct ps_driver_ext) Removed prop_size, fixed_size members;
9987         added font_size.  All references changed.
9988         (ps_init_driver) Initializes font_size.  Simplified space checking
9989         code.
9990         (static var option_tab[]) Removed prop-size, fixed-size; added
9991         font-size.
9992         (ps_option) Handles font_size.
9993
9994         * som-high.c: Moved prototypes into somP.h.
9995         (som_init_driver) New function.
9996         (som_submit_table) Moved some code into new function
9997         som_init_driver().
9998         (build_target) Moved some code into new function
9999         som_internal_eject_page().
10000         (som_eject_page) Uses som_internal_eject_page().
10001         (som_internal_eject_page) New function.
10002
10003         * som-low.c: Moved prototypes into somP.h.
10004
10005         * som.h: Formatting fixes.
10006
10007         * somP.h: (struct som_driver_ext) Removed em_width;
10008         added prop_em_width, fixed_width.
10009
10010 Mon Jun  2 14:25:25 1997  Ben Pfaff  <blp@gnu.org>
10011
10012         * Makefile.am: Added `localedir' definition.  Added
10013         -DLOCALEDIR="..." to DEFS.  Added -I. to INCLUDES.
10014
10015         * ascii.c: (macro draw_line) Fixed capitalization.
10016
10017         * ascii.c, autorecode.c, cases.c, cmdline.c, command.c, common.c,
10018         compute.c, count.c, data-in.c, data-list.c, data-out.c,
10019         descript.q, dfm.c, display.c, do-if.c, error.c, expr-evl.c,
10020         expr-opt.c, expr-prs.c, file-handle.q, file-type.c, filename.c,
10021         formats.c, frequencies.q, get.c, getline.c, glob.c, groff-font.c,
10022         hash.c, heap.c, include.c, inpt-pgm.c, lexer.c, list.q, loop.c,
10023         main.c, mis-val.c, misc.c, modify-vars.c, numeric.c, output.c,
10024         postscript.c, print.c, q2c.c, recode.c, rename-vars.c, repeat.c,
10025         sample.c, sel-if.c, sfm-read.c, sfm-write.c, sfmP.h, som-frnt.c,
10026         som-high.c, som-low.c, sort.c, split-file.c, sysfile-info.c,
10027         temporary.c, title.c, tokens.h, val-labs.c, var-labs.c,
10028         vars-atr.c, vars-prs.c, vector.c, vfm.c, weight.c: Marked strings
10029         for internationlization.
10030
10031         * glob.c: [HAVE_LOCALE_H] Includes locale.h.
10032
10033 Sun Jun  1 23:31:18 1997  Ben Pfaff  <blp@gnu.org>
10034
10035         * do-if.c, sort.c, val-labs.c: Comment fixes.
10036
10037         * glob.c: (init_glob) Uncommented, updated i18n support.
10038         
10039         * arena.c, ascii.c, data-in.c, descript.q, error.c, expr-evl.c,
10040         expr-opt.c, expr-prs.c, filename.c, frequencies.q, groff-font.c,
10041         output.c, postscript.c, sfm-read.c, som-high.c, vars-prs.c: Made
10042         the declarations of macros taking arguments a lot nicer.
10043
10044 Sun Jun  1 17:22:04 1997  Ben Pfaff  <blp@gnu.org>
10045
10046         * error.h: Removed CE, CW aliases for SE, SW.
10047
10048         * q2c.c: Removed explicit streq() definition since it's duplicated
10049         in str.h.
10050         
10051         * approx.h, error.h, font.h, hash.h, misc.h, output.h, somP.h,
10052         stats.h, str.h, tokens.h: Made the declarations of macros taking
10053         arguments a lot nicer-looking of <pinard@iro.umontreal.ca>.
10054         Comment fixes.
10055
10056 Sun Jun  1 12:02:06 1997  Ben Pfaff  <blp@gnu.org>
10057
10058         * cmdline.c: Comment fixes.
10059         (pick_compat) Changed return type to int.  Now, instead of setting
10060         glob var `compat' to the emulation, returns the emulation.  All
10061         references changed.
10062         (parse_command_line) Added terminating null to end of
10063         `long_options' array definition.
10064         (pre_syntax_message) Fixes.
10065         (usage) Shows the default emulation in the syntax message by
10066         calling pick_compat().
10067
10068         * getline.c: (getl_add_include_dir) Separates paths with
10069         PATH_DELIMITER, not DIR_SEPARATOR.
10070
10071         * glob.c: (init_glob) Fixed references to DEFAULT_VER_PCP40,
10072         DEFAULT_VER_WIN61, DEFAULT_VER_X40.
10073
10074         * output.c: (outp_configure_macro) Make earlier definitions for a
10075         particular key override later ones for the same key.
10076         
10077 Fri May 30 19:40:49 1997  Ben Pfaff  <blp@gnu.org>
10078
10079         * ascii.c: Comment fixes.
10080
10081         * output.c: (outp_get_paper_size)
10082         s/STAT_OUTPUT_INIT_FILE/STAT_OUTPUT_PAPERSIZE_FILE/.
10083         
10084 Sun May 25 22:34:07 1997  Ben Pfaff  <blp@gnu.org>
10085
10086         * ascii.c, postscript.c, sfm-read.c, sfm-write.c, sort.c: Include
10087         <errno.h>.  GNU libc 2 enforces this!
10088
10089         * command.c: (parse_cmd) Fixed problem with `else' clause being
10090         paired with wrong `if'.  Comment fix.
10091
10092 Fri May  9 16:53:52 1997  Ben Pfaff  <blp@gnu.org>
10093
10094         * getline.c: [!HAVE_LIBREADLINE] (read_console) Changed
10095         blp_getline() to getline().
10096
10097         * output.c: (outp_eval_dimension) Changed the fix from last time;
10098         there was no variable `a'.
10099
10100         * q2c.c: (get_line) Fixed boundary condition overrun bug.
10101
10102 Mon May  5 21:58:22 1997  Ben Pfaff  <blp@gnu.org>
10103
10104         * output.c: (outp_evaluate_dimension) Fixed handling of negative
10105         numbers having fractional parts.  Added case of a fraction without
10106         a whole-number part.
10107
10108 Fri May  2 22:08:05 1997  Ben Pfaff  <blp@gnu.org>
10109
10110         * ascii.c: (ascii_text_get_font_position) Removed.
10111
10112         * expr.h, exprP.h: Disabled debugging.
10113
10114         * groff-font.c, postscript.c: Changed `groff' to `Groff' in
10115         several places.
10116
10117         * output.h: (struct outp_class_struct) Removed
10118         text_get_font_position method.  All references deleted.
10119
10120         * postscript.c: Big change here.  Fontmaps were completely
10121         eliminated because of a change in philosophy.  Comment fixes.
10122         (struct ps_fontmap, ps2dit_map, font_family, dit2family_map)
10123         Removed.
10124         (struct ps_driver_ext) `position', `fontmap', `prop_name',
10125         `fixed_name' members removed.  New members `prop_family',
10126         `fixed_family'.  `family' member changed to type char *.
10127         (static var ps_fontmaps) Removed.
10128         () Removed.
10129         (ps_init_driver) Removed obsolete references, updated.
10130         Initializes `translate_x', `translate_y', `scale'.  Doesn't read
10131         fontmap, of course.  Refers to font names through internal_name
10132         rather than subversive means.  Frees proper items.
10133         (static var option_tab[]) Removed `fontmap-file' option; renamed
10134         `fixed-font', `prop-font'.
10135         (ps_option) Corresponds to option_tab[].
10136         (read_fontmap, release_fontmap, ps_to_dit, compare_ps2dit,
10137         hash_ps2dit, compare_dit2family, hash_dit2family, compare_family,
10138         hash_family) Removed.
10139         (postopen) Generates font names from family names.  Gets
10140         PostScript font name properly.  New prologue file comment `!!!'
10141         style.
10142         (ps_open_page) Adds translate_x, translate_y to BP prologue
10143         function; gives SF argument floating-point format.
10144         (ps_text_set_font_by_name) Doesn't try to map PostScript->Groff
10145         font name.  Doesn't change font family.
10146         (ps_text_set_font_by_position) Generates Groff font name from font
10147         family name instead of through table lookup.
10148         (ps_text_set_font_by_family) Renamed `ps_text_set_font_family',
10149         all references changed.  Reduced to simple string assignment.
10150         (ps_get_font_name) Removed.
10151         (ps_get_font_family) Reduced to string return.
10152         (text) Doesn't save `position' since it no longer exists.  Ugly
10153         kluge to save font family--fix soon?
10154         (load_font) Removed PostScript name argument.
10155         
10156 Thu May  1 14:58:59 1997  Ben Pfaff  <blp@gnu.org>
10157
10158         * postscript.c: Comment fix.
10159         (ps_open_page) Puts scale factor in PostScript output.
10160         
10161 Sat Apr 26 11:49:32 1997  Ben Pfaff  <blp@gnu.org>
10162
10163         * Makefile.am: Distcleans q2c.
10164
10165 Wed Apr 23 21:33:48 1997  Ben Pfaff  <blp@gnu.org>
10166
10167         * ascii.c: (delineate) Sets text size even if width is zero.
10168
10169         * command.c: Comment fix.
10170         (static var cmd_table[]) Re-enabled EVALUATE command.
10171         (parse_cmd) Lotsa comment fixes.  Fixed infinite loop in parsing
10172         of comments in script files.  Now more liberal on criteria for
10173         performing a state transition--if *anything* happened correctly,
10174         not just if *everything* happened correctly.
10175
10176         * data-out.c: (convert_F) Comment fix.  Why in the fsck does
10177         Checker segfault on formatting large numbers and why in the fsck
10178         hadn't I noticed this before?
10179
10180         * expr.h, exprP.h: No longer turn off GLOBAL_DEBUGGING.
10181
10182         * list.q: (cmd_list) Commented out the actual output routine
10183         because of various problems.  Probably will abandon the idea of
10184         using the general `crushed tables' for the LIST procedure.
10185
10186         * temporary.c: (restore_dictionary) Sets var_by_name to NULL after
10187         clearing it.  Allocates a new var_by_name dictionary before trying
10188         to add members to it.
10189
10190         * vars-atr.c: [DEBUGGING] (dump_one_var_node) Removed argument
10191         `sib'.  Changed type of `node' argument.
10192         [DEBUGGING] (dump_var_tree) Replaced avlwalk() with
10193         avl_walk_inorder().
10194         (clear_variable) Only dumps the var tree if var_by_name non-NULL.
10195         [DEBUGGING] Only deletes the variable from var_by_name if that var
10196         non-NULL.
10197
10198 Fri Apr 18 16:48:41 1997  Ben Pfaff  <blp@gnu.org>
10199
10200         * Makefile.am: Added include files to SOURCES.  Added
10201         frequencies.q to EXTRA_DIST.  Removed include/ from INCLUDES.  Now
10202         includes rules for q2c.  Added `boast' target.
10203
10204 Fri Apr 18 15:42:22 1997  Ben Pfaff  <blp@gnu.org>
10205
10206         * Makefile.am: Maintainer-clean Makefile.in.
10207         
10208         * Makefile.am: Fixed redundant EXTRA_DIST line.
10209
10210         * ascii.c: Comment fixes.
10211         (ascii_line_vert) Fixed overly aggressive range check.
10212
10213         * display.c: Removed dead code.
10214
10215         * list.q: Turn debugging on.
10216         (flush_table) New debug code.
10217
10218         * sfm-read.c: (read_value_labels) malloc's the structure before
10219         trying to assign to its members.
10220
10221         * sfm-write.c: Comment fix.
10222
10223         * som-high.c: (som_submit_table) Sets som.t and som.d on each call
10224         to output_table().
10225         (output_table) No arguments anymore--gets them through `som'
10226         global.  New debug code.  In crushed tables, now sets `htv' as
10227         well as `hv' to avoid bad confusion later.
10228         (dump_crush_page) New debug code.
10229
10230         * som-low.c: (som_dump_crush_page) New debug code.
10231
10232 Thu Mar 27 01:11:29 1997  Ben Pfaff  <blp@gnu.org>
10233
10234         All source files: Broke long lines into multiple lines.
10235         
10236         * ascii.c: (ascii_close_page) Uses host_system var in place of
10237         HOST_SYSTEM constant.
10238
10239         * cmdline.c: (var syntax_message[]) Broke into
10240         pre_syntax_message[] and post_syntax_message[].
10241         (usage) Outputs both parts, separated by driver list.
10242
10243         * error.h: Fixed broken formatting.
10244
10245         * expr-opt.c: (str_search, str_rsearch) New functions.
10246
10247         * misc.c: (blp_getdelim) Removed.  All references changed to
10248         `getdelim'.
10249         (str_search, str_rsearch) Removed.
10250         (memrmem) New function.
10251
10252         * misc.h: (blp_getline) Removed.  All reference changed to
10253         `getline'.
10254
10255         * stat.h: New file.
10256
10257         * filename.c: Includes "stat.h", not <sys/stat.h>.
10258         (blp_getenv) Uses host_system var instead of HOST_SYSTEM constant.
10259
10260         * output.c: (outp_list_classes) Changed output formatting.
10261
10262         * sfm-write.c: (write_header) Uses host_system var instead of
10263         HOST_SYSTEM constant.
10264         (write_rec_7_34) Extracts version numbers from the version string.
10265         Untested.
10266
10267         * sort.c: Includes "stat.h", not <sys/stat.h>.
10268
10269         * str.c: (strcasecmp) Removed.
10270
10271         * title.c: (cmd_document) Uses host_system var instead of
10272         HOST_SYSTEM constant.
10273
10274         * version.c: Generated on-the-fly by the Makefile instead of being
10275         static.
10276
10277         * str.h: Comment fixes.  Doesn't substitute for missing memmove or
10278         memcpy.
10279         [!HAVE_STRNCASECMP] Declares strncasecmp().
10280
10281         * version.h: Removed stray character.  Comment fixes.
10282         (vars host_system, build_system) New vars.
10283
10284 Mon Mar 24 21:47:31 1997  Ben Pfaff  <blp@gnu.org>
10285
10286         * Most source files: Changed formatting of copyright notice; fixed
10287         FSF address; reformatted to better conform to GNU standards;
10288         comment fixes.  Added markups to prevent GNU indent from messing
10289         up my beautiful formatting :-).
10290         
10291         * q2c.c: (get_line) Ignores lines that begin with `/* *INDENT' so
10292         that GNU indent markups can be passed through without problems.
10293
10294 Wed Feb 19 21:30:31 1997  Ben Pfaff  <blp@gnu.org>
10295
10296         * get.c: Turned off debugging.
10297
10298         * glob.c: (init_glob) Turned on save-file compression by default.
10299
10300         * sfm-write.c: (sfm_write_case) Fixed bug which resulted in less
10301         compression than was possible in save files.
10302
10303 Sun Feb 16 20:57:20 1997  Ben Pfaff  <blp@gnu.org>
10304
10305         * data-out.c: (convert_F) Comment fixes.  Debug message fixes.
10306
10307         * frequencies.q: Removed Fiasco extensions.  Updated calculation
10308         algorithms.  Polished output format. 
10309         (struct frq_info_struct) Removed members `max_degree', `min_n',
10310         all references removed.
10311         (macro frq_extensions) Removed.
10312         (static vars min_n, max_degree) Removed, all references removed.
10313         (internal_cmd_frequencies) Doesn't handle extensions.  Doesn't
10314         calculate `min_n', `max_degree'.
10315         (postcalc) Passes new arg to dump_statistics().
10316         (dump_full) Honor NOLABEL option.  Buggy?  Adds variable name
10317         title.
10318         (dump_condensed) Adds variable name title.
10319         (sum_freqs) Removed.
10320         (calc_stats) Updated calculation algorithm.
10321         (dump_statistics) Removed warning for too-few observations.
10322         Changed table formatting.  Adds variable name title if passed new
10323         arg is nonzero.
10324
10325         * output.h: Comment fix.
10326
10327         * recode.c, sample.c, sort.c: Disabled debug code.
10328
10329         * som-frnt.c: (som_set_value, som_set_float, som_set_text)
10330         Improved debug code.
10331
10332         * var.h: (enum series frq_*) Removed Fiasco extensions.
10333
10334 Sat Feb 15 21:26:53 1997  Ben Pfaff  <blp@gnu.org>
10335
10336         * command.c: Added PROCESS IF to command table.
10337
10338         * Lots & lots of places, removed checks for NULLs preceding calls
10339         to free_expression(), which itself checks.
10340
10341         * descript.q: Removed Fiasco extensions.  Removed optimizations
10342         for non-weighted active files.  Implemented some options.
10343         Finished polishing output format.  Comment fixes.  Merged
10344         `descript.g'.
10345         (static vars n_glob_miss_list, n_glob_valid, n_glob_missing,
10346         max_degree, min_n) Removed.
10347         (macro dsc_extensions) Removed.
10348         (struct dsc_info_struct) Removed `min_n' member, all references
10349         fixed.
10350         (internal_cmd_descriptives) Removed calculation of min_n,
10351         max_degree.  Only deals with one `calc' routine instead of two
10352         flavors.
10353         (precalc) Eliminated redundancy.  Updated for changes to
10354         descriptives_proc structure.
10355         (calc) Moved here from `descript.g'.  Rewritten to calculate
10356         statistics via `moments about the mean' rather than by summing,
10357         summing squares, summing cubes, and so on.
10358         (postcalc) Rewritten for new-style statistical calculation.
10359         (display) Removed support for displaying variables across rows.
10360         No longer crushes the descriptives table.  Removed ancient code.
10361         Added display of N, by variable and listwise.
10362
10363         * descript.g: Removed; merged into `descript.q'.
10364
10365         * expr-evl.c: (evaluate_expression) Now returns a double.  For
10366         numeric results, it returns the result as well as storing it in
10367         the passed `value' structure if non-NULL.  For string results it
10368         just returns 0.0 and it must be passed non-NULL.  Many references
10369         to this function were optimized by use of this change, especially
10370         but not exclusively in `compute.c'.
10371
10372         * frequencies.g: Comment fix.
10373
10374         * glob.c: (glob var process_if_expr) New global var.
10375
10376         * postscript.c: (static var option_tab[]) Corrected entry for
10377         `fixed_size'.
10378         (postopen) Sets x->size to x->prop_size.
10379         (ps_text_set_font_by_name) Sets font size as well as typeface for
10380         PROP and FIXED fonts.
10381         
10382         * sel-if.c: (cmd_process_if) New function.
10383
10384         * sfm-write.c: (struct sfm_fhuser_ext) New member `n_cases'.
10385         (sfm_write_dictionary) Sets `n_cases' to 0.
10386         (sfm_write_case) Increments `n_cases'.
10387         (sfm_close) Attempts to seek the system file back to the header
10388         and write the number of cases in its proper slot.
10389
10390         * som-frnt.c: (som_insert_table) Masks off expansion options since
10391         only SOPT_X_NORM seems to work sensibly.
10392
10393         * som-low.c: (get_cell_size) Fixed bug when a table cell was sized
10394         with a `fixed' value of 2.
10395
10396         * sort.c: (cmd_sort_cases) Cancels PROCESS IF.
10397
10398         * sysfile-info.c: (cmd_sysfile_info) Doesn't display more than 10
10399         value labels; uses SOPT_NONE instead of SOPT_X_BOTH.
10400
10401         * var.h: (enum series dsc_*) Removed Fiasco extensions.
10402         (struct descriptives_proc) Removed `miss_noweight'; new members
10403         `X_bar', `M2', `M3', `M4', `min', `max'.
10404
10405         * vars-atr.c: (discard_variables) Cancels PROCESS IF.
10406
10407         * vfm.c: (close_active_file) Cancels PROCESS IF.
10408         (write_case) Doesn't process cases unselected by PROCESS IF.
10409
10410 Fri Feb 14 23:32:58 1997  Ben Pfaff  <blp@gnu.org>
10411
10412         * glob.c: (glob var err) Removed.
10413
10414         * sysfile-info.c: (cmd_sysfile_info) When adjusting table size,
10415         doesn't have to take into account number of value labels since
10416         they're in a subtable anyway.  Also, doesn't display more than 10
10417         value labels since we can't yet break pages in subtables.
10418
10419 Tue Feb  4 15:15:50 1997  Ben Pfaff  <blp@gnu.org>
10420
10421         * som-frnt.c: (som_change_table_size) Simple change for elegance
10422         that shouldn't change behavior.
10423         (som_set_value) Comment fix.
10424
10425         * som-high.c: (som_submit_table) Message fix.
10426
10427 Wed Jan 22 21:54:00 1997  Ben Pfaff  <blp@gnu.org>
10428
10429         * command.c: Added SYSFILE INFO to command table.
10430
10431         * file-handle.q: (fh_handle_filename) New function.
10432
10433         * get.c: (save_trns_proc) Fixed a bug in padding of output data
10434         with spaces.
10435
10436         * main.c: (parse) New return value for command functions, -3.
10437
10438         * misc.h: Comment fix.
10439
10440         * output.h: Comment fixes.
10441         (macro COMPONENTS) Removed.
10442
10443         * postscript.c: (write_text) Modified literal_chars[] so that `('
10444         and ')' are not written to the output in strings as literals.
10445
10446         * sfm-read.c: (sfm_read_dictionary) New argument.
10447         (read_header) New argument.  Sets the information structure's
10448         values from the header information.  
10449         (read_variables) [__CHECKER__] Redefines isalnum()--some sort of
10450         bizarre Checker problem, I guess.
10451         (read_variables) Proper cleanup on lossage.
10452
10453         * sfm.h: (struct sfm_read_info) New struct for use by
10454         sfm_read_dictionary().
10455
10456         * som-frnt.c: (som_create_table) New argument CREATE_FLAGS,
10457         currently used just for tables that can be dynamically resized and
10458         thus have to be allocated with arena_malloc() instead of
10459         arena_alloc().  All references changed.
10460         (som_change_table_size) New function.
10461         (som_insert_table) Bugfix: now inserts `cell', not `c'!
10462
10463         * som-high.c: [GLOBAL_DEBUGGING] (check_table) Moved to som-low.c.
10464         (som_submit_table) [GLOBAL_DEBUGGING] Doesn't call check_table()
10465         any more.
10466
10467         * som-low.c: (draw_cell) Calls draw_table_cell() for SCON_TABLE
10468         cells.
10469         (draw_intersection) Now takes an argument specifying the table in
10470         question.  All references changed.
10471         (draw_table_cell) New function.
10472         (som_get_table_size) [GLOBAL_DEBUGGING] Calls check_table().
10473         (som_get_table_size) Many nice new explanatory comments.
10474         [GLOBAL_DEBUGGING] (check_table) Moved here from som-high.c.
10475
10476         * som.h: New enum series SOM_CREATE_* for use as create flags with
10477         som_create_table().
10478
10479         * str.h: Moved a comment here from TODO.
10480
10481         * sysfile-info.c: New file.  Reference implementation.
10482
10483 Sun Jan 19 14:22:11 1997  Ben Pfaff  <blp@gnu.org>
10484
10485         * command.c: Added RENAME VARIABLES to table of commands.
10486
10487         * data-in.c: (dls_error) Sets `cust_field'.
10488         (parse_N) Message fix.
10489         (parse_day_count) New function.
10490         (to_roman) Never outputs VX as a `short form' of V.
10491         (parse_month) Fixed parsing of Roman numerals.
10492         (parse_trailer) Message fix.
10493         (parse_DATE, parse_ADATE, parse_EDATE, parse_SDATE, parse_JDATE,
10494         parse_QYR, parse_MOYR, parse_WKYR, parse_DTIME) Issue a message if
10495         the date is invalid.
10496         (parse_SDATE) Fixed swapped day, year.
10497         (parse_JDATE) Fixed bug for dates in 1582.
10498         (parse_DTIME) Allows days not between 1 and 31.
10499         (parse_numeric) Makes local copy of f.type for easier usage.
10500         FMT_DOLLAR fixed.
10501
10502         * data-out.c: (convert_F) When outputting as scientific, properly
10503         sets f.type as fp->type.
10504         (insert_commas) Fixed operator precedence problem with setting of
10505         nitems.  Changed strcpy to memcpy (no null terminator). 
10506         (convert_date) Fixed FMT_JDATE: added 1900 to year.
10507         (convert_CCx) Essentially rewritten, but now it works.
10508
10509         * display.c: (cmd_display) Added DISPLAY FILE LABEL (undocumented
10510         feature of Fiasco).
10511         (display_documents) Implemented.
10512
10513         * error.c: (glob var cust_field) New var.
10514         (vmsg) Displays cust_field as part of message classes DE and DW.
10515
10516         * formats.c: (debug_print) Fixed to compile under updated
10517         dictionary format.
10518
10519         * get.c: (cmd_get, cmd_save_internal) Close file handle on
10520         failure.
10521
10522         * misc.c: (parse_format_specifier) Formatting fix.
10523
10524         * modify-vars.c: (struct var_modification) Renamed `n_reorder' as
10525         `n_rename' for clarity.
10526         (cmd_modify_vars) Initializes `forward' and `positional' at
10527         appropriate times.  Frees lists of vars to rename on failure.
10528         Comment fix.  Frees memory on success.  
10529         (rearrange_dict) Simplified `for' loop condition.
10530
10531         * rename-vars.c: New file (reference implementation).
10532         
10533         * set.q: (internal_cmd_set) Fixed `emu' test condition.
10534
10535         * sfm-read.c: (read_header) File label is created only if file
10536         label in file is not blank.
10537         (read_variables) Initializes `dict' local variable.
10538         (read_documents) Proper behavior on lossage.
10539
10540         * sfm-write.c: (write_header) Doesn't blank out the file label
10541         (why was this here to begin with?!)
10542
10543         * temporary.c: (save_dictionary) File label is copied only if
10544         non-NULL.  Doesn't try to xstrdup() dictionary documents.
10545         Adapted so as to not irritate Checker.
10546         (free_dictionary) Only destroys var_by_name if non-NULL.
10547
10548         * title.c: (cmd_file_label) Doesn't skip FILE, LABEL tokens.
10549         (cmd_document) Doesn't skip DOCUMENT token.  Adds some header
10550         lines to the document, indents the document.  Also, it works now.
10551         (add_document_line) New function.
10552
10553         * var.h: (struct dictionary) Reordering.
10554
10555         * vars-prs.c: (parse_variables) On lossage, only local_free()'s
10556         bits if it was allocated to begin with.
10557
10558 Thu Jan 16 13:08:57 1997  Ben Pfaff  <blp@gnu.org>
10559
10560         * command.c: Added MODIFY VARS to list of commands.
10561
10562         * configure.in: Updated custom macros for autoconf 2.12.  Removed
10563         mmap reference; fixed termcap library reference.
10564
10565         * display.c: (display_variables) Fixed a few bugs although it's
10566         still not well written.
10567
10568         * error.c: [!__CHECKER__] (chkr_disp_call_chain) New function.
10569         (induce_segfault) Calls chkr_disp_call_chain() instead of
10570         inducing an actual SIGSEGV.
10571
10572         * expr-opt.c: (evaluate_tree) Swapped order of arguments to
10573         str_search() and str_rsearch().  Fixed tests for matches on
10574         OP_INDEX and OP_RINDEX.
10575
10576         * filename.c: (good_getcwd) Removed as the new libc for Checker
10577         doesn't contain this bug, apparently.
10578
10579         * misc.c: (str_search, str_rsearch) Changed order of arguments for
10580         consistency with GNU memmem.
10581         (blp_getdelim) Changed `len' from `int' to `size_t'.
10582
10583         * modify-vars.c: Reference implementation.
10584
10585         * som-frnt.c: (zero_length) New global var.
10586         (som_create_table) Message fix.
10587
10588         * som.h: Added gcc attributions to som_set_text(),
10589         som_output_text() prototypes.  blank_line() refers to
10590         zero_length[] instead of a literal null string to suppress gcc
10591         warnings.
10592
10593         * sort.c: (do_external_sort) Fixed fencepost error on lossage.
10594         (allocate_cases) Decrements x_max so the last element of x[] can
10595         be used by the algorithm.
10596
10597         * var.h: Changed minor details of `variable' declaration.  
10598         (struct modify_vars_proc) New struct.
10599         (struct variable) Added field p.mfv.
10600
10601         * vars-atr.c: Comment fix.
10602
10603         * vars-prs.c: (fill_all_vars) More optimal implementation.
10604
10605         * vfm.c: (dump_splits) Sets the last byte of temp_buf to a null
10606         character, which it shouldn't have to do but printf() seems to
10607         read the null byte even though I supply a maximum length...
10608
10609 Fri Jan 10 20:22:08 1997  Ben Pfaff  <blp@gnu.org>
10610
10611         * command.c: Removed command alias X for QUIT.
10612         (parse_cmd) Fixed comment parsing.
10613
10614         * dfm.c: (struct dfm_fhuser_ext) Fields `len', `size' are now of
10615         type size_t.
10616         (read_record) Fixed references to len, size.
10617         (dfm_get_record) Restructured.
10618
10619         * file-handle.h: (struct file_handle) Field `lrecl' now of type
10620         size_t.
10621
10622         * file-handle.q: (internal_cmd_file_handle) Checks for nonpositive
10623         record length.
10624
10625         * modify-vars.c: New file.  Not complete.
10626         
10627         * set.q: (set_ccx) Fixed operator precedence problem regarding ^
10628         and ==.
10629
10630         * sfm-read.c: (bswap_flt64, read_header, write_variable) Fixed
10631         problems caused by int/size_t differences.
10632
10633         * sort.c: (output_record, merge_once) Cast `size_t's to `int's in
10634         appropriate spots.
10635
10636         * str.c: (strcasecmp) Fixed bug that cropped up when the strings
10637         being compared were of equal length.
10638
10639 Thu Jan  2 19:08:23 1997  Ben Pfaff  <blp@gnu.org>
10640
10641         * command.c: Added DOCUMENT, DROP DOCUMENTS, FILE LABEL.
10642
10643         * lexer.c: (get_dotted_rest_of_line) New function.
10644
10645         * sel-if.c: (cmd_filter) Cannot choose string or scratch variables
10646         as filters.
10647
10648         * sfm-read.c: (sfm_read_dictionary) Calls read_documents() to read
10649         type 6 records.  Frees the dictionary properly.
10650         (read_header) Initializes the dictionary instead of letting
10651         read_variables() do it.  Sets the dictionary file label from the
10652         system file.
10653         (read_documents) New function.
10654
10655         * sfm-write.c: (sfm_write_dictionary) Calls write_documents() to
10656         write type 6 record if appropriate.
10657         (write_header) Writes file label from dictionary.
10658         (write_documents) New function.
10659
10660         * temporary.c: (save_dictionary, restore_dictionary,
10661         free_dictionary) Properly handle new fields in dictionary struct.
10662
10663         * title.c: (get_title) Returns after failure().
10664         (cmd_file_label, cmd_document, cmd_drop_documents) New functions
10665         for new commands FILE LABEL, DOCUMENT, DROP DOCUMENTS.  Untested.
10666
10667         * var.h: (struct dictionary) New fields `label', `n_documents',
10668         `documents'.
10669
10670 Wed Jan  1 22:08:10 1997  Ben Pfaff  <blp@gnu.org>
10671
10672         * command.c: Added FILTER to list of commands.
10673
10674         * frequencies.g: [WEIGHTING] Removed test for weighting!=-1 since
10675         it's always true.
10676
10677         * get.c: (cmd_save_internal) Removed weighting code since it's now
10678         handled by sfm-write.c.  Properly commented out debug code.
10679
10680         * glob.c: (glob var weighting) Removed.
10681
10682         * sel-if.c: Comment fixes.
10683         (cmd_filter) New function.
10684
10685         * sfm-read.c: (struct sfm_fhuser_ext) New field `weight_index'.
10686         (sfm_read_dictionary) Sets weighting variable direct in the
10687         created dictionary now.  (Apparently we previously didn't support
10688         weighting on GET?)
10689         (read_header) Sets weight_index field in sfm_fhuser_ext from
10690         header read from disk.
10691
10692         * sfm-write.c: (sfm_write_dictionary) Comment fix.
10693         (write_header) Now sets the weighting in the header from the
10694         passed primary dictionary instead of from the sfm_write_info.
10695
10696         * sfm.h: (struct sfm_write_info) Removed field `weight'.
10697
10698         * som-high.c: (dump_crush_table) Fixed a couple of assertions that
10699         broke on boundary conditions.
10700
10701         * var.h: (struct dictionary) New fields `weight_var',
10702         `weight_index', and `filter_var'.
10703         (glob var weighting) Removed.  This is now part of struct
10704         dictionary.  All references changed; the less mechanical changes
10705         are described above.
10706
10707         * vars-atr.c: (find_dict_variable) New function.
10708
10709         * vfm.c: (static var filter_index) New variable.
10710         (open_active_file) Initializes filter_index from default_dict.
10711         (write_case) Calls proc_func() only if the filter variable is
10712         nonzero; this implements FILTER behavior.
10713
10714         * weight.c: (static var weight_varname) Removed.
10715         (cmd_weight) Modified default_dict instead of glob vars.
10716         (update_weighting) Changed the signature to modify a dictionary
10717         instead of glob vars.  Now returns the weighting variable.
10718         (get_weighting_variable) Removed; its function is absorbed by
10719         update_weighting().
10720         (stop_weighting) Operates on a dictionary now.
10721
10722 Wed Jan  1 17:00:59 1997  Ben Pfaff  <blp@gnu.org>
10723
10724         * sort.c: Removed debugging info from messages.
10725         (do_external_sort) Cleans up after itself by deleting the
10726         temporary directory on failure.  (On success it is deleted by the
10727         input program.)
10728         (allocate_cases) Removed debug code.  Added clean up code.
10729         (output_record) Removed debug code.
10730         (merge) Added code to close all the input files that are currently
10731         open.  This is a likely location for bugs, because I'm not sure
10732         about boundary conditions.  Removed an unnecesary heap_delete().
10733         (merge_once) Removed input file "optimization" that in fact
10734         screwed up the rest of the code.  Message and comment fixes.
10735
10736 Sun Dec 29 21:36:48 1996  Ben Pfaff  <blp@gnu.org>
10737
10738         * error.c: [__CHECKER__] (induce_segfault) Flushes output streams.
10739
10740         * heap.c: (heap_delete) New argument.
10741
10742         * sort.c: Finished implementation of external sort.
10743
10744         * vfm.c: (read_from_disk) Returns after a disk error.
10745
10746 Sun Dec 22 23:10:39 1996  Ben Pfaff  <blp@gnu.org>
10747
10748         * sort.c: (static var state) Removed.
10749         (static vars max_handles, tmp_basename, tmp_extname,
10750         huffman_queue) New variables.
10751         (do_external_sort) Moved most code to new functions.
10752         Creates huffman_queue.
10753         (allocate_file_handles, allocate_cases) New functions.
10754         (static vars run_no, run_length, file_index, case_count) New
10755         variables. 
10756         (output_record) Returns success.  Now really writes to the output
10757         file.
10758         (begin_run, end_run) New functions.
10759         (write_initial_runs) Returns success.  Initializes run_no to -1.
10760         Calls begin_run(), end_run() at appropriate times.  Outputs debug
10761         messages.
10762         (write_to_sort_cases) Calls begin_run(), end_run() at appropriate
10763         times.
10764         (merge) New function.
10765
10766         * heap.c, heap.h: New files.  Hopefully in near-final form.
10767
10768 Sat Dec 21 21:51:04 1996  Ben Pfaff  <blp@gnu.org>
10769
10770         * glob.c: Added write_active_file to global vars.
10771
10772         * sort.c: Several new miscellaneous static variables.
10773         (cmd_sort_cases) Big comment fix.
10774         (perform_case_2) Renamed `do_external_sort' and completely
10775         rewritten.
10776         (case_2_proc_func) Removed.
10777         (output_record, write_initial_runs, write_to_sort_cases,
10778         compare_record) New functions.
10779
10780         * vfm.c: [DEBUGGING] (index_to_varname) Excised bit rot.
10781
10782 Tue Dec 17 18:57:59 1996  Ben Pfaff  <blp@gnu.org>
10783
10784         * sort.c: (perform_case_2) Changed the method for allocation of
10785         lots of memory--now allocates one case at a time in hopes that
10786         more cases can be allocated with heavily fragmented memory.
10787
10788         * var.h: (write_active_file) New global var.
10789
10790         * vfm.c: (procedure, close_active_file, write_case,
10791         SPLIT_FILE_procfunc) Now allow beginfunc, procfunc, and endfunc
10792         arguments to procedure() to be NULL.  All references to
10793         procedure() that made use of dummy functions were changed to NULL
10794         functions.
10795         (open_active_file) If write_active_file is non-NULL, the output
10796         device becomes DEV_PGM (a new enum).
10797         (close_active_file) Sets write_active_file to NULL.
10798         (read_from_memory) Comment fix.
10799         (record_case) Calls write_active_file() when the output device is
10800         DEV_PGM.
10801
10802 Sun Dec 15 15:32:16 1996  Ben Pfaff  <blp@gnu.org>
10803
10804         * sort.c: New file.
10805
10806         * autorecode.c: (cmd_autorecode) Fixed parsing of options.
10807         Fixed checking for duplicate varnames.
10808         (recode) xmalloc()'s the transformation instead of arena_alloc()'ing
10809         it.
10810         (autorecode_trns_free) Destroys hash tables for each recoding
10811         specification.
10812         (autorecode_proc_func) Compares NULL to *vpp instead of vpp.
10813
10814         * command.c: Added SORT CASES to cmd_table.
10815         (null_func, null_int_func) Prototyped.
10816
10817         * descript.g: (calc_weight, calc_noweight) Computes own case
10818         number now.
10819         
10820         * frequencies.q: (dump_statistics) Fixed problem with
10821         too-few-cases warning message.
10822
10823         * get.c: (cmd_save_internal) Handles weighting properly.
10824
10825         * hash.c: (hsh_dump) Output format changed.
10826         (force_hsh_insert) Actually works now, prototype changed.
10827
10828         * list.q: (static var case_num) New variable.
10829         (cmd_list) Initializes case_num.
10830         (list_cases) Increments case_num.
10831
10832         * var.h: Added definitions for SORT CASES.  Comment fixes.
10833
10834         * vfm.c: Some definitions moved to new file vfmP.h.  Comment
10835         fixes.  `active' renamed vfm_active, `rep' renamed
10836         vfm_replacement, all references changed.
10837         (procedure) The procfunc no longer receives a case number.  All
10838         references changed.
10839         (write_case) Subtle reordering.
10840         (SPLIT_FILE_procfunc) Counts cases differently.  Slightly less
10841         redundant.
10842
10843         * weight.c: (get_weighting_variable) New function.
10844
10845         * vfmP.h: New file with definitions from vfm.c.
10846
10847 Sat Dec 14 10:35:30 1996  Ben Pfaff  <blp@gnu.org>
10848
10849         * command.c: (FILE_TYPE_okay) Commented out some tests because
10850         they're clumsy and not yet needed.
10851
10852         * var.h: Most *_trns structures moved to their respective source
10853         files.  Some were moved into a new file, do-ifP.h.  Comment fixes.
10854         (union any_trns) Changed to a typedef for trns_header.
10855         (struct input_program_pgm) Removed.
10856
10857         * vars-prs.c: (parse_variables) Only local_free()'s bits if it
10858         was allocated in the first place.
10859
10860 Fri Dec 13 21:30:53 1996  Ben Pfaff  <blp@gnu.org>
10861
10862         * autorecode.c: New file.
10863         
10864         * command.c: Added AUTORECODE to command table; re-enabled SET.
10865
10866         * data-out.c: (convert_F) Handles infinities and NaNs properly.
10867
10868         * error.c: (vmsg) Comment fixes.
10869
10870         * hash.c: Comment fix.
10871         (hashpjw_d) New function.
10872         (hashpjw) Reimplemented as call to more general function
10873         hashpjw_d().
10874         (internal_comparison_fn) Initializes pointers properly.
10875         (hsh_sort) [GLOBAL_DEBUGGING] New debugging code.
10876         (force_hsh_insert, force_hsh_find) New debugging wrapper
10877         functions.
10878
10879         * main.c: (main) Message fix.
10880
10881         * output.c: (outp_read_devices) Message fix.
10882
10883         * set.q: Comment fixes.
10884         (custom_results) Implemented Wnd/X form of subcommand.
10885         (set_routing) New function.
10886         (internal_cmd_set) Implemented ERRORS, MESSAGES.
10887
10888         * settings.h: (SET_ROUTE_*) New enum series.
10889         (set_results) Renamed set_results_file, all references changed.
10890         (set_messages) Removed.
10891         (glob vars set_errors, set_messages, set_results) New vars.
10892
10893         * title.c: (get_title) Remembers to xstrdup() the result of
10894         get_rest_of_line().
10895
10896         * var.h: (arc_item, arc_spec, autorecode_trns) New structures for
10897         use by AUTORECODE.
10898         (union any_trns) New element `arc'.
10899
10900 Fri Dec  6 23:53:47 1996  Ben Pfaff  <blp@gnu.org>
10901
10902         * command.c: (output_line) Removed references to set_screen.
10903
10904         * error.c: (static var terminating) New var.
10905         (hcf) Sets terminating to 1.
10906         (vmsg) If terminating is nonzero, does not attempt to call hcf().
10907         This prevents an infinite loop if an error occurs within hcf().
10908
10909         * expr-evl.c: (evaluate_expression) [__CHECKER__] Replaced case
10910         statement circumlocution with `case 42000' trick.
10911         (evaluate_expression) New support for OP_STR_MIS.
10912
10913         * expr-opt.c: (evaluate_expression) [__CHECKER__] Replaced case
10914         statement circumlocution with `case 42000' trick.
10915         (dump_node) Handles OP_STR_MIS.
10916
10917         * expr-prs.c: (MISSING_func, SYSMIS_func) Rewrote to handle string
10918         variables exceptions.
10919         (parse_function) Message fix.
10920         (ops[]) Added OP_STR_MIS.
10921
10922         * expr.h: Added OP_STR_MIS to OP_* enum.  Comment fixes.
10923
10924         * exprP.h: [__CHECKER__] Removed case statement circumlocution.
10925
10926         * glob.c: Removed set_scrnfile glob var.
10927         (init_glob) set_errorbreak set to 0 by default.
10928
10929         * groff-font.c: Changed included files.
10930         (groff_read_font) Initializes font_arena local var correctly.
10931         (default_font) New function.
10932
10933         * output.c: Comment fixes.
10934         (glob var disabled_devices) New variable.
10935         [GLOBAL_DEBUGGING] (static var iterating_driver_list) New
10936         variable.
10937         [GLOBAL_DEBUGGING] (reentrancy) New function.
10938         [GLOBAL_DEBUGGING] (outp_read_devices, outp_done, find_driver,
10939         outp_iterate_enabled_drivers) Calls to reentrancy().
10940         (destroy_list) New function.
10941         (outp_done) Moved code to destroy_list().
10942         (parse_options) Parses `listing', `screen', `printer' options
10943         internally.
10944         (configure_driver) Sets new `device' member of driver.
10945         (outp_iterate_enabled_drivers, outp_enable_device) New functions.
10946
10947         * output.h: Comment fixes.  New enum series OUTP_DEV_*.
10948         (struct outp_driver_struct) New member `device'.
10949
10950         * postscript.c: (find_encoding_file) Doesn't display its own error
10951         messages.
10952         (default_encoding) New function.
10953         (switch_font) Calls default_encoding() if no encoding can be
10954         found.
10955         (text) Makes up a character metric if none exists for the desired
10956         character.
10957         (load_font) Properly copies a fallback filename.  Calls
10958         default_font() for a font if none at all are known.
10959
10960         * set.q: Comment fixes.  Removed OUTPUT subcommand.
10961         (custom_listing) Calls outp_enable_device() to enable/disable
10962         listing device.
10963         (turn_screen_on) Removed.
10964         (internal_cmd_set) Calls outp_enable_device() to enable/disable
10965         screen, printer devices.
10966
10967         * settings.h: Comment fixes.
10968         (glob vars set_output, set_printer, set_screen, set_scrnfile)
10969         Removed.
10970
10971         * som-high.c: (som_submit_table, som_eject_page) Use
10972         outp_iterate_enabled_drivers() instead of iterating
10973         outp_driver_list directly.
10974
10975 Wed Dec  4 21:34:17 1996  Ben Pfaff  <blp@gnu.org>
10976
10977         * data-in.c: (parse_EDATE, parse_SDATE) New functions.
10978         (parse_string_as_format) Handles new formats.
10979         (parse_numeric) Now handles DOT and PCT formats.
10980
10981         * data-out.c: (convert_E, convert_F, insert_commas) Handle DOT
10982         format now.
10983         (convert_date) Handle EDATE and SDATE formats.
10984         (convert_CCx) Now if there's not room for the currency characters,
10985         converts it as F format if it's positive instead of giving up
10986         quickly.  Also fixed save-and-restore bug with decimal point
10987         characters.  
10988         (convert_format_to_string) Handles new formats.
10989
10990         * misc.c: (formats[]) Added new formats.
10991         (convert_fmt_ItoO) Supports new formats.
10992
10993         * sfm-read.c: (parse_format_spec) Supports new formats.  Better
10994         data checking.  New argument, all references changed.
10995
10996         * sfm-write.c: (write_format_spec) Supports new formats.
10997
10998         * var.h: New formats FMT_DOT, FMT_PCT, FMT_EDATE, FMT_SDATE.
10999         Comment fixes.
11000
11001 Sun Dec  1 17:19:00 1996  Ben Pfaff  <blp@gnu.org>
11002
11003         * cmdline.c: Comment fixes.
11004         (parse_command_line) Changed return type to void.
11005
11006         * data-in.c: (parse_string_as_format) Added FMT_CCA...FMT_CCE to
11007         switch.
11008         (parse_numeric) Handles international numbers (comma as decimal
11009         point).  Some reformatting.
11010
11011         * data-list.c: (parse_free) Default output format is now
11012         set_format instead of hard-coded F8.2.
11013         (read_from_data_list_list) Emits error message on undefined data
11014         only if set_undefined is nonzero.
11015
11016         * data-out.c: (convert_E) Changes decimal point from period to
11017         comma if appropriate.  Restructured.  Better comments.
11018         (convert_F) Changes decimal point from period to comma if
11019         appropriate.
11020         (insert_commas) Major bug with handling of negative values fixed.
11021         Also, inserts periods instead of commas if appropriate.
11022         (convert_CCx) New function.
11023         (convert_format_to_string) Added FMT_CCA...FMT_CCE to switch.
11024         (num_to_string) Changed `.' to set_decimal.
11025
11026         * dfm.c: Comment fixes.
11027         (dfm_close) Frees ext->line even in inline_file.
11028         (open_inline_file) New function.
11029         (open_file_r) When opening the inline file: now properly
11030         recognizes `BEGIN DATA.' line, and calls open_inline_file() to
11031         finish up.
11032         (read_record) Calls fh_close_handle() instead of dfm_close() to
11033         close the inline file.  Makes a copy of the line getl_buf to avoid
11034         interlock problems.
11035         (dfm_get_record) Restructured.  Now checks the return value of
11036         open_file_r().
11037         (cmd_begin_data) Moved open code into open_inline_file().  Relaxed
11038         checking for use of inline file.  No longer tries to close inline
11039         file.
11040
11041         * error.c: (glob var error_already_flagged) New var.
11042         (vmsg) Message change.  Now checks max number of errors/warnings,
11043         acts on it.
11044
11045         * file-handle.q: (fh_handle_name) Now allows closing of
11046         inline_file.
11047         (fh_init_files) Reformatted.
11048
11049         * get.c: (trim_dictionary) Checks SCOMP option instead of COMP.
11050
11051         * getline.c: (getl_include) Fixed bug that popped up when called
11052         when file queue was empty.
11053         (read_console) Resets error_count, warning_count,
11054         error_already_flagged to zero.
11055
11056         * glob.c: Many changes to update list of variables.
11057         (init_compat_dependent) Now this function is called whenever
11058         `compat' changes.  It now sets set_seed only if it hasn't
11059         previously been referenced.  It now calls
11060         lex_init_compat_dependent().
11061
11062         * include.c: (cmd_include_at) Frees temporary buffer instead of
11063         line buffer.  
11064         (cmd_include) Doesn't make copy of include file name.
11065
11066         * lexer.c: Comment fixes.
11067         (init_lex) Moved some code into new function
11068         lex_init_compat_dependent().
11069         (lex_init_compat_dependent) New function.
11070         (hex_val) Simplified.
11071         (preprocess_line) Uses set_endcmd instead of hardcoding `.'.
11072
11073         * main.c: Comment fixes.
11074         (main) Reformatted.
11075
11076         * misc.c: (formats[]) Added FMT_CCA...FMT_CCE.
11077         (check_input_specifier) Disallows FMT_CCA...FMT_CCE.
11078         (convert_fmt_ItoO) Detects FMT_CCA...FMT_CCE.
11079         (setup_randomize) Sets set_seed_used.
11080
11081         * set.q: Comment fixes.
11082         (custom_results) Conditionalizes on `compat'.
11083         (custom_log) Calls custom_journal().
11084         (set_ccx) New function.
11085         (cmd_set) Calls init_compat_dependent() when `compat' changes.
11086         Calls set_ccx() to handle CCA...CCE.  Sets set_grouping
11087         when set_decimal changes.  Range-checks values for MITERATE,
11088         MNEST.  Message fixes.
11089
11090         * settings.h: Comment fixes.
11091         (struct set_cust_currency) New struct.
11092         (set_cc[], set_grouping, set_seed_used) New global vars.
11093
11094         * var.h: (FMT_CCA...FMT_CCE) New output formats.
11095         (FCAT_OUTPUT_ONLY) New FCAT_* constant.
11096
11097 Thu Nov 28 23:14:07 1996  Ben Pfaff  <blp@gnu.org>
11098
11099         * glob.c: Revised variables to correspond to settings.h.
11100         (init_glob) Initializes variables from settings.h properly.
11101
11102         * set.q: Began long-overdue major revision to correspond to new
11103         philosophy.  Most code changed. 
11104
11105         * settings.h: Mostly changed; reorganized, reordered, large new
11106         comment.
11107
11108 Thu Nov 28 19:46:10 1996  Ben Pfaff  <blp@gnu.org>
11109
11110         * get.c: (cmd_save_internal) No longer forces compression off.
11111
11112         * sfm-read.c: (read_compressed_data) If eof is reached when
11113         reading a new instruction octet, only signal error if we're in the
11114         middle of a case.
11115
11116         * sfm-write.c: (COMPRESSION_BIAS) New #define.
11117         (struct sfm_fhuser_ext) New member `end'.
11118         (write_header) Refers to COMPRESSION_BIAS instead of magic 100.0.
11119         (ensure_buf_space) New function.
11120         (sfm_write_case) Reimplemented in order to support compression.
11121         (sfm_close) Writes out the remaining contents of the compression
11122         buffer if any.
11123
11124 Wed Nov 27 23:18:35 1996  Ben Pfaff  <blp@gnu.org>
11125
11126         * command.c: Defined SAVE and XSAVE commands in command table.
11127
11128         * common.h: second_lowest_value is of type flt64, not double.
11129
11130         * file-handle.h: Comment fix.
11131
11132         * get.c: Comment fixes.
11133         (static var `trns') New.
11134         (save_write_case_func, save_trns_proc, save_trns_free, null_func,
11135         cmd_save_internal, cmd_save, cmd_xsave) New functions.
11136         (dict_delete_run) Clears the variables and frees them now.
11137         (trim_dictionary) Sets default for compression.
11138         On KEEP subcommand, frees deleted variables as well as clearing
11139         them.  Finally got the sense of the test for deleting all
11140         variables correct.
11141         [DEBUGGING] (dump_dict_variables) Message fix.
11142
11143         * glob.c: (init_glob) set_compression set to 1 by default.
11144
11145         * list.q: Properly #includes config.h.
11146
11147         * misc.h: New macro REM_RND_UP.
11148
11149         * settings.h: Comment fix.
11150
11151         * sfm-read.c: (structs sysfile_header, sysfile_format,
11152         sysfile_variable; inline function bswap_int32) Moved to new file
11153         sfmP.h.
11154         (corrupt_msg) [__CHECKER__] No longer induces segfault.
11155         (sfm_read_dictionary) Fixed bug caused by failing to initialize
11156         var_by_index.
11157         (read_machine_flt64_info) Fixed some problems caused by confusion
11158         between flt64 and double types.
11159         (read_header) Message fix.
11160         (read_variables) Fixed set of cases in which we byte-swap sv.print
11161         and sv.write.  Fixed confusion of flt64 and double.
11162
11163         * sfm.h: (struct sfm_write_info) New.
11164
11165         * som-high.c: (som_draw_title) Properly frees `s'.
11166
11167         * temporary.c: (save_dictionary) Comment fix.
11168
11169         * var.h: Comment fixes.  New FMT_* enum, FMT_NUMBER_OF_FORMATS.
11170         (struct trns_header) Formatting fix.
11171         (struct save_trns) New.
11172
11173         * vars-atr.c: (discard_variables) Comment fix.
11174
11175         * sfm-write.c: New file, baseline release.
11176
11177         * sfmP.h: New file, baseline release.
11178
11179 Sun Nov 24 14:53:53 1996  Ben Pfaff  <blp@gnu.org>
11180
11181         * cmdline.c: (parse_command_line) `--version' output updated.
11182         (glob var syntax_message[]) Added my e-mail address.
11183
11184         * file-handle.q, lexer.c, vfm.c: Changed many instances of
11185         `illegal' to `invalid'.
11186
11187         * sfm-read.c: (struct sfm_fhuser_ext) New fields used as
11188         uncompression buffer.
11189         (sfm_close) Frees decompression buffer.
11190         (sfm_read_dictionary) Initializes decompression buffer.
11191         (buffer_input, read_compressed_data) New functions.
11192         (sfm_read_case) Restructured; now calls read_compressed_data() to
11193         handle compressed system file data.
11194
11195         * var.h: Comment fix.
11196
11197 Mon Nov 11 15:34:09 1996  Ben Pfaff  <blp@gnu.org>
11198
11199         * dfm.c: (dfm_close) Does not set h->{ext,class} because the
11200         caller handles it.
11201          
11202         * get.c: New comments.  New static var `get_file'.
11203         (cmd_get) Now fully implemented.  Calls discard_variables();
11204         initializes fv and lv for all variables; new debug code; sets
11205         up the dictionary; sets up the input program.
11206         (read_from_get, cancel_get) New functions.
11207
11208         * sfm-read.c: Comment fixes.
11209         (sfm_close) New static function.
11210         (sfm_read_dictionary) Properly sets up the class of the
11211         file_handle.  No longer cares what size the data is in records of
11212         type 7.  Also, on failure, properly cleans up the file_handle and
11213         free()s some stuff.
11214         (read_variables) No longer thinks it knows `nval' of the
11215         dictionary.  Now sets p.get.fv, etc., instead of speculatively
11216         setting fv itself.
11217         (read_value_labels) Fixed off-by-one error in indexing of
11218         var_by_index[].
11219         (sfm_read_case) New function.
11220         (sfm_r_class) New static var.
11221
11222         * var.h: (get_proc) New struct.
11223         (struct variable) New member p.get.
11224
11225 Thu Nov  7 20:52:28 1996  Ben Pfaff  <blp@gnu.org>
11226
11227         * get.c: Removed GTSV_OPT_MAP because of a misinterpretation of
11228         the manual's meaning.
11229         (rename_variables) New function.
11230         (trim_variables) Doesn't try to parse MAP any more.  Removed debug
11231         code.  Now properly reorders the dictionary on the KEEP keyword.
11232
11233         * sfm-read.c: (read_value_labels) Fixed some bugs regarding
11234         garbage collection.
11235
11236         * vars-atr.c: (clear_variable) New argument `dictionary *'.
11237         (rename_variable) New function.
11238         (free_val_lab) Reformatted.
11239
11240 Thu Nov  7 17:29:16 1996  Ben Pfaff  <blp@gnu.org>
11241
11242         * var.h: Reindented entire file.  Comment fixes.
11243         (glob vars var, var_by_name, nvar, N, nval, n_splits, splits)
11244         Removed.
11245         (glob var default_dict) New.
11246         (struct indirect_dictionary) Removed.
11247
11248         * Many other source files were changed to add `default_dict.'
11249         before all references to the dictionary of the active file.
11250         
11251         * vars-atr.c: (make_indirect_dictionary) Removed.
11252
11253         * glob.c: Reindented all variable declarations.  Updated for
11254         changed var.h.  Comment fixes.
11255
11256         * temporary.c: (restore_dictionary, save_dictionary) Simplified
11257         because now we can mainly copy dictionary structs.
11258
11259         * vars-prs.c: (is_dict_varname, parse_dict_variable,
11260         parse_variables) Takes dictionary instead of indirect_dictionary
11261         first argument.
11262         (parse_variables) Instead of calling make_indirect_dictionary,
11263         just sets DICT to &default_dict if DICT is NULL.  Of course, lots
11264         of `*dict.' references had to be changed to `dict->'.  Removed
11265         debug code.
11266
11267 Thu Nov  7 15:48:52 1996  Ben Pfaff  <blp@gnu.org>
11268
11269         * get.c: Added GTSV_OPT_* series of enums.
11270         (trim_dictionary, dict_delete_run) New functions.
11271         [DEBUGGING] (dump_dict_variables) New function.
11272         (cmd_get) Calls trim_dictionary() to get dictionary fully set-up.
11273         [DEBUGGING] Calls dump_dict_variables() to display results.
11274
11275         * glob.c: (cmp_variable) Now a public function declared in var.h.
11276
11277         * sfm-read.c: Turned off debug code.  Comment fixes.
11278         (read_machine_int32_info, read_machine_flt64_info) New functions
11279         to parse type 7 records.
11280         (sfm_read_dictionary) Properly byteswaps several fields now.
11281         Calls read_machine_*_info() to parse type 7 subtypes 3 and 4
11282         records.  [DEBUGGING] Dumps dictionary.
11283         (read_variables) Sets `index' field of variables created properly.
11284         Constructs avl tree of variables in dictionary.  [DEBUGGING] No
11285         longer dumps dictionary.
11286         (read_value_labels) Properly byteswaps fields.  [DEBUGGING] New
11287         debug code.
11288         [DEBUGGING] (dump_dictionary) No longer stubbed out.
11289
11290         * temporary.c: (restore_dictionary) Destroys `var_by_name' glob
11291         var before destroying any variables just to save a little time.
11292
11293         * var.h: (struct variable) Reordered in order to make name[] the
11294         first member; this makes pointers to `variable' pointers to the
11295         variable name, simplifying avl trees, etc.
11296         (struct indirect_dictionary) New struct.
11297
11298         * vars-atr.c: (find_variable) Rewritten for efficiency.
11299         (make_indirect_dictionary, is_dict_varname, parse_dict_variable)
11300         New functions.
11301         (is_varname) Rewritten for efficiency.
11302         (parse_variables) New argument, which is a `dictionary *'.  All
11303         references changed.  This function now reads variable names from
11304         the dictionary passed, or from the default dictionary if NULL.
11305
11306 Tue Nov  5 18:34:59 1996  Ben Pfaff  <blp@gnu.org>
11307
11308         * misc.h: Added new macro DIV_RND_UP to perform integer division,
11309         rounding up.  Changed many references to ROUND_UP to use this
11310         instead.
11311
11312         * sfm-read.c: Includes avl.h.
11313         (corrupt_msg) Induces a segfault under Checker.
11314         (macro assertive_bufread) New.  Many references to bufread() now
11315         use this instead.
11316         (sfm_read_dictionary) Split up into several functions.  Added code
11317         to read dictionary records following the the type 2 records.  Not
11318         quite complete.  New variable `var_by_index'.
11319         (read_header, read_variables) New functions extracted from
11320         sfm_read_dictionary().
11321         (read_value_labels) New function.
11322         (bufread) Checks ferror() if fread() doesn't return the expected
11323         value; if ferror() is zero it's just EOF.
11324         (dump_dictionary) Stubbed out.
11325
11326         * BTW: The source code now exceeds 50000 lines!
11327         
11328 Mon Nov  4 22:03:28 1996  Ben Pfaff  <blp@gnu.org>
11329
11330         * command.c: Added GET to cmd_table[].
11331
11332         * list.q: Removed reference to alloca headers.
11333         (cmd_list) Gave prototype.
11334
11335         * sfm-read.c: Added DEBUGGING comments.
11336         (sfm_read_dictionary) Checks bias correctly.  Sets
11337         dict->var_by_name to NULL.  Calculates long_string_count
11338         correctly.  realloc's dict->var[] array to minimum size.
11339         [DEBUGGING] Calls dump_dictionary.
11340         [DEBUGGING] (dump_dictionary) New function.
11341
11342         * temporary.c: (save_dictionary) Sets var_by_name to NULL.
11343         (restore_dictionary) If the dictionary contains a non-NULL
11344         var_by_name, uses that instead of generating one.
11345         (free_dictionary) Destroys var_by_name.
11346
11347         * var.h: (struct dictionary) Added field `var_by_name'.
11348
11349         * get.c: New file, not complete.
11350
11351 Sun Nov  3 12:24:36 1996  Ben Pfaff  <blp@gnu.org>
11352
11353         * mis-val.c: New enums MV_NOR_*.  New struct num_or_range.
11354         (parse_num_or_range) New function.
11355         (parse_numeric) Reimplemented in order to support LOW THRU <n> and
11356         <n> THRU HIGH missing values.
11357
11358         * output.h: [__GNUC__>1 && __OPTIMIZE__] (width, height) Made
11359         __attribute__((const)).
11360
11361         * q2c.c: (get_token) Merged isdigit || isalpha into isalnum.
11362
11363         * sfm-read.c: Finished reference implementation.
11364
11365         * sfm.h: Includes var.h.
11366
11367         * var.h: Comment fixes.
11368         (struct `variable') Reordered some fields.
11369
11370         * vars-atr.c: (is_num_user_missing) Added support for MISSING_*
11371         constants added previously.
11372
11373 Wed Oct 30 17:13:08 1996  Ben Pfaff  <blp@gnu.org>
11374
11375         * common.h: Comment fixes.  Added declaration of
11376         `second_lowest_value' as variable or macro.  Made `compat_type',
11377         `pgm_state_type' into anonymous enums.
11378
11379         * display.c: Comment fix.
11380
11381         * glob.c: [ENDIAN==UNKNOWN] Added definition for `endian' global
11382         var.
11383         [!defined SECOND_LOWEST_VALUE] Added definition for
11384         `second_lowest_value' global var.
11385         (compat, pgm_state global vars) Changed types to `int'.
11386         (init_glob) Initializes `second_lowest_value'.
11387
11388         * sfm-read.c: Continued work, not complete.
11389
11390         * var.h: Added new MISSING_* constants to handle LOWEST and
11391         HIGHEST.
11392
11393 Sat Oct 26 23:06:06 1996  Ben Pfaff  <blp@gnu.org>
11394
11395         * sfm-read.c: New file, not complete.
11396
11397         * cases.c: (vec_insert) Changed vector expansion algorithm.
11398         (vec_delete) Fixed bug that screwed up deletion sometimes, it was
11399         mucking up the RECODE transformation in particular.
11400         (envector) Harmless change in notation.
11401
11402         dfm is now fairly well tested again.  
11403         * dfm.c: (dfm_get_record) Only returns ext->ptr if ext is
11404         non-NULL--duh.
11405         (cmd_begin_data) if(ext->line) replaced by if(ext && ext->line).
11406
11407         * recode.c: Comment fix.
11408
11409         * sfm.h: Interface should be fairly final now, or at least for a
11410         day or so...
11411
11412         * vfm.c: [DEBUGGING] (index_to_varname) New function.
11413         (open_active_file) [DEBUGGING] Translates ccase indices into
11414         variable names now to make it easier to understand what's really
11415         going on.
11416
11417 Sat Oct 26 20:46:31 1996  Ben Pfaff  <blp@gnu.org>
11418
11419         * data-in.c: Comment fix.
11420
11421         * data-list.c: Includes dfm.h.
11422         (do_reading) Uses new function dfm_push_cust().
11423
11424         * data-out.c: (convert_time, convert_WKDAY, convert_MONTH) Added
11425         `return 1;' at end.
11426
11427         * file-handle.h: Completely changed.  Some parts split off into
11428         new file dfm.h.  Implemented in file-handle.q.
11429         (enum FH_*) Removed.
11430         (struct fh_ext_class) New struct.
11431         (struct file_handle) Retained only these fields: name, norm_fn,
11432         fn, recform, lrecl, mode.  New fields class, ext.
11433         (get_handle_by_name, get_handle_by_filename, parse_file_handle,
11434         close_handle, handle_name) Added `fh_' prefix to name, all
11435         references changed.
11436
11437         * dfm.h: New file, implemented in dfm.c.
11438         (get_record, put_record, fwd_record, bkwd_record, set_record,
11439         get_cur_col) Functions moved from file-handle.h, now prefixed with
11440         `dfm_'.
11441         (dfm_push_cust) New function.
11442
11443         * sfm.h: New file.  Incomplete.
11444
11445         * dfm.c: All functions adjusted/rewritten for new dfm/fhp
11446         interface.  Functions reordered, comments changed.  Not well
11447         tested, probably full of bugs.
11448         (struct dfm_fhuser_ext) New struct.
11449         (dfm_close) New function.
11450         (open_file_r) Pickier about finding `BEGIN DATA.' line.
11451         (open_file_w) User messages changed.
11452         (get_record) Comment fixed.
11453         (read_record) Increments ext->ln even for inline_file.  Calls
11454         dfm_close() for inline_file when `END DATA.' encountered.
11455         (dfm_get_record) Experimental restructuring.
11456         (dfm_push_cust) New function.
11457         (cmd_begin_data) Detects whether the inline file was fully read by
11458         checking whether it is still open; detects whether it was read at
11459         all by checking whether the line number is greater than zero.
11460
11461         * file-handle.q: All functions adjust/rewritten for new dfm/fhp
11462         interface.  Functions reordered, comments changed.  Not well
11463         tested, probably full of bugs.
11464         (init_file_handle) Removed initializers for obsolete fields, added
11465         new fields.
11466         (fh_close_handle) Much simpler, now mainly calls the class
11467         function.
11468         (fh_init_files) Renamed inline file internal filename.
11469
11470         * file-type.c: Includes dfm.h.
11471         (read_from_file_type) Doesn't use dfm internal state anymore.
11472
11473         * inpt-pgm.c, print.c: Include dfm.h.
11474
11475         * recode.c: (internal_cmd_recode) Casts strlen() return value to
11476         int in comparison with other int.
11477
11478         * som-high.c: (build_target) Fixed operator precedence problem in
11479         if statement (& versus ==).
11480
11481 Sat Oct 26 10:39:25 1996  Ben Pfaff  <blp@gnu.org>
11482
11483         * dfm.c: (read_record) Can now read fixed-length records; not
11484         tested.
11485         (put_record) Can now write fixed-length records; not tested.
11486
11487         * file-handle.h: FH_* defines changed to enums.  New enum series
11488         FH_RF_*, FH_MD_*.
11489         (struct file_handle) New members recform, lrecl, mode.
11490
11491         * file-handle.q: Parser changed.
11492         (internal_cmd_file_handle) Added support for new /RECFORM, /MODE,
11493         /LRECL subcommands.  These are compatible with Windows.
11494         (init_file_handle) Initializes recform, mode fields.
11495
11496         * q2c.c: (get_line) When outputting `!' comment lines, now
11497         increments the output file line number so that `#line' directives
11498         are correct.
11499         (make_identifier) New function that converts an arbitrary string
11500         into a valid C identifier.
11501         (dump_vars) Calls make_identifier() in two places in order to
11502         suppress some errors for bad identifiers.
11503         (make_match) Allows TRUE as synonym for YES and FALSE as synonym
11504         for NO.  Allows numbers to be prefixed by underscores to make them
11505         acceptable C identifiers but still to be parsed as numbers by the
11506         Fiasco lexer.
11507
11508 Thu Oct 24 20:13:42 1996  Ben Pfaff  <blp@gnu.org>
11509
11510         * command.c: Re-enabled RECODE, SAMPLE, SELECT IF.
11511         
11512         * dfm.c: Comment fixes. (get_record) Gives error if file handle
11513         was opened for writing.
11514         (open_file_w) New function.
11515         (read_record) Uses strncasecmp if available.  Improved error
11516         messages, comments.
11517         (put_record) New function.
11518
11519         * file-handle.h: Moved function comments into dfm.c and
11520         file-handle.q.  Comment fixes.  Removed declarations of
11521         tilde_expand() and normalize_filename().
11522         (struct file_handle) Changed `open' from boolean to enumerated
11523         field to allow for three states--closed, open for reading, open
11524         for writing--all references changed.
11525
11526         * file-handle.q: Includes filename.h.
11527
11528         * print.c: (CMD_* enums) Renamed PRT_* and moved into var.h; all
11529         references changed.
11530         (alloc_line) Makes allowance for line terminator characters in
11531         calculations.
11532         (print_trns_proc) Now handles OUTFILE, WRITE differences.
11533         (print_space_trns_proc) Handles OUTFILE differences.
11534
11535         * recode.c, sample.c: Comment fixes.
11536
11537         * var.h: (struct print_trns) Changed boolean field `eject' to
11538         bitmapped field `options'; all references changed.  New enums
11539         PRT_* for use with this field.
11540
11541         * exception.h, test-exception.c: Removed.
11542
11543 Thu Oct 24 17:47:14 1996  Ben Pfaff  <blp@gnu.org>
11544
11545         * ascii.c: (delineate) Turned off debug output.
11546
11547         * common.c: [Checker and Linux] (__assert_fail, __eprintf) Moved
11548         to error.c.
11549
11550         * data-in.c: (parse_string_as_format) Sets the entire string value
11551         to spaces, not just the short string part of it.  Is this correct
11552         now? 
11553
11554         * data-out.c: (convert_date) Fixed DATETIME format problems with
11555         decimal places, removed debug code.
11556
11557         * dfm.c: (open_file_r) Fixed bug where an error would occur in the
11558         middle of parsing BEGIN DATA that would cause the lexer to read
11559         from a wild pointer `prog'; now calls new function
11560         preprocess_line() in lexer.c.
11561
11562         * error.c: [__CHECKER__] (hcf) Calls induce_segfault() on improper
11563         termination.
11564         [Checker and Linux] (__assert_fail, _eprintf) Moved from common.c.
11565         Now call induce_segfault() to induce the segfault.
11566         (induce_segfault) New function.
11567
11568         * expr-opt.c: Comment fix.
11569         (parse_sysvar) New function.
11570         (parse_primary) Added system variable support--calls
11571         parse_sysvar().
11572         (global var ops) Added OP_CASENUM operator.
11573
11574         * expr.h: Comment fixes.
11575         (OP_* enum) added OP_CASENUM operator.
11576         (struct casenum_node) New struct.
11577         (union any_union_union) New member `cas' of type `casenum_node'.
11578
11579         * glob.c: (global var last_vfm_invocation) New var.
11580         (init_glob) Initializes last_vfm_invocation.
11581
11582         * lexer.c: (lookahead) Fixed reversed condition on if statement.
11583
11584         * getline.c: (get_line) Split into get_line() and preprocess_line().
11585         (preprocess_line) New function.
11586
11587         * var.h: Declares last_vfm_invocation.
11588
11589         * vfm.c: (procedure) Sets last_vfm_invocation.
11590
11591 Wed Oct 23 21:53:43 1996  Ben Pfaff  <blp@gnu.org>
11592
11593         * command.c: (parse_cmd) Fixed bad assertion related to
11594         lookahead().
11595
11596         * data-in.c: (parse_month) Implemented to parse months according
11597         to full interpretation of standard.
11598         (to_roman) New function.
11599         (parse_wk_delimiter) Bug fix (forgot to skip `WK' in string).
11600         (parse_weekday) Bug fix (forgot to skip all the day name).
11601
11602         * data-list.c: (read_from_data_list_fixed) Fixed bug that screwed
11603         up parsing of multirecord data items.  Also fixed user message.
11604
11605         * data-out.c: Comment fix.
11606         (year2, year4, convert_date, convert_time, convert_WKDAY,
11607         convert_MONTH) New functions to support time & date output.
11608         (convert_format_to_string) Calls new time & date output routines.
11609
11610         * expr-prs.c: (nary_num_func) Found a bug, but didn't fix it yet.
11611
11612         * lexer.c: (lookahead) Noted a previously unnoticed caveat in
11613         comment.
11614
11615         * main.c: [DEBUGGING] (dump_token) Updated to handle getline.h.
11616
11617         * misc.c: (global var formats) Fixed declarations of DATETIME,
11618         TIME, DTIME.
11619
11620         * postscript.c: (text) Fixed a pair of bugs in the reallocation of
11621         the output_char buffer.
11622
11623         * vars-prs.c: (parse_DATA_LIST_vars) Fixed a failure to free
11624         memory bug.  Fixed user messages.
11625
11626 Tue Oct 22 17:27:04 1996  Ben Pfaff  <blp@gnu.org>
11627
11628         * Removed #pragma argsused from lots of places.
11629         
11630         * data-in.c: Implemented zoned decimal and time-date formats.
11631         Untested.  This is a huge chunk of code--maybe 1000 lines and 50
11632         new functions.
11633
11634         * data-out.c: Implemented zoned decimal format.
11635
11636         * expr.h: Moved yrmoda() declaration here from exprP.h.
11637
11638         * misc.c: (global var formats) Minor fixes--added
11639         FCAT_SHIFT_DECIMAL to formats N and Z.
11640         (convert_fmt_ItoO) Added support for format Z.
11641
11642         * som-frnt.c: (som_set_value) Fixed bug regarding string values.
11643
11644 Mon Oct 21 20:39:59 1996  Ben Pfaff  <blp@gnu.org>
11645
11646         * command.c: (parse_cmd) [GLOBAL_DEBUGGING] Inserted call to
11647         som_check_workspace() that is activated between commands.
11648
11649         * data-list.c: (dump_fixed_table, dump_free_table) Finished these
11650         for good, I hope.
11651
11652         * list.q: (begin_row) Changed title expansion style from
11653         SOPT_X_VERT to SOPT_X_SHSP.
11654
11655         * som-frnt.c: Now includes `somP.h'.
11656         (som_push_workspace, som_pop_workspace) New functions that, taken
11657         together, form a solution to the recursive table building problem
11658         mentioned yesterday.  Surrounded every table output routine
11659         throughout the program with calls to these functions.
11660         [GLOBAL_DEBUGGING] (som_check_workspace) New function.
11661         (som_create_table) Checks that there's an active workspace.
11662         (som_destroy_all_tables, som_crush) Removed.
11663
11664         * som-high.c: (global var som_preserve_tables) Removed, all
11665         references deleted.
11666         (som_submit_table) Checks that there's an active workspace.
11667         (dump_columnated_table) Doesn't columnate tables that would have
11668         just one row per column.
11669         (dump_crush_page, som_dump_crush_page) Removed debugging code.
11670         (som_dump_crush_page) Moved row number labels from left side of
11671         tables to right side.
11672         (som_get_table_size) Added support for SOPT_X_SHSP.
11673
11674         * som.h: New cell expansion type SOPT_X_SHSP.
11675
11676         * somP.h: (global vars arena_stack, n_arena_stack, m_arena_stack)
11677         New vars.
11678         (global var curtab_arena) Moved from som-frnt.c.
11679
11680 Sun Oct 20 13:45:28 1996  Ben Pfaff  <blp@gnu.org>
11681
11682         * ascii.c: [GLOBAL_DEBUGGING] (SUPPRESS_WARNINGS) New debug option
11683         that causes bad location warnings to be suppressed.
11684         (delineate) Saves current font when calling draw_text(); fixed
11685         handling of NULLs when backing up.  Also fixed line-wrapping bug.
11686
11687         * command.c: Re-enabled `LEAVE', `NUMERIC', `PRINT', `PRINT EJECT',
11688         `PRINT FORMATS', `PRINT SPACE', `STRING', `TITLE', `WRITE'.
11689
11690         * common.c: Added code to cause assertion failure to dump core
11691         when run under Checker.
11692
11693         * data-list.c: (dump_fixed_table) Fixed some inconsistencies, but
11694         there are still bugs.
11695
11696         * glob.c: (__eprintf) Removed.
11697
11698         * list.q: Inserted som_preserve_tables kluge that prevents tables
11699         from being thrown away due to recursive table building through
11700         som_output_line being called from a transformation during the LIST
11701         procedure invocation.  This is a general problem that must be
11702         solved in a better way since it applies to all procedures in
11703         general.
11704         (begin_row) Changed title options to SOM_X_VERT from SOM_X_BOTH.
11705         (flush_table) Removed SOM_TOPT_PRESERVE from submission options.
11706
11707         * numeric.c: Fixed several errors in the form of msg() calls.
11708
11709         * print.c: Updated for use of som.
11710         (dump_table) Reimplemented.
11711         (print_trns_proc) Calls som_eject_page() instead of eject_page().
11712         Calls som_output_text() instead of outs_line().
11713
11714         * som-frnt.c: (som_destroy_all_tables) Sets som_preserve_tables to
11715         0.
11716         (som_output_text) Function moved from som-low.c.  Interface
11717         changed.
11718
11719         * som-high.c: (som_preserve_tables) New global public variable
11720         declared in som.h.
11721         (som_submit_table) Destroys the tables only if som_preserve_tables
11722         is 0.
11723         (paginate_horizontally) Bugfix: sets som.mpw even if there's only
11724         one subrow per row.  Now labels subrows if there's more than one
11725         subrow per row.
11726         (dump_crush_table) Added wishlist comment.
11727         (som_eject_page) New public function declared in som.h.
11728
11729         * som-low.c: (som_dump_crush_page) Draws row labels if there's
11730         more than one subrow per row.
11731         (som_output_text) Moved to som-frnt.c.
11732
11733         * som.h: (SOM_TOPT_PRESERVE) Removed.
11734
11735         * title.c: (get_title) Changed interface.
11736         (cmd_title) Changed `title' to `outp_title'.
11737         (cmd_subtitle) Changed `subtitle' to `outp_subtitle'.
11738
11739 Sun Oct 20 09:04:15 1996  Ben Pfaff  <blp@gnu.org>
11740
11741         * list.q: (flush_table) Conforms to new partial options in
11742         som_submission_form.
11743
11744         * som-high.c: (paginate_horizontally) Changed form of subrow
11745         number labels.
11746         (build_target) Omits spacing before table if
11747         SOM_TOPT_PARTIAL_OMIT_TOP is selected.
11748         (dump_crush_page) Changed interface.  Only trims bottom rule if
11749         SOM_TOPT_PARTIAL_OMIT_BTM is not selected.
11750         (dump_crush_table) Handles partial tables.
11751         (output_row_label) New function.
11752         (som_dump_crush_page) Emits subrow number labels.  Draws vertical
11753         rule on the right edge of narrow subrows.
11754
11755         * som.h: Changed SOM_SUB_PARTIAL_* series of submission type
11756         constants to a series of SOM_TOPT_PARTIAL_* submission options.
11757         All references updated.
11758
11759 Fri Oct 18 19:46:49 1996  Ben Pfaff  <blp@gnu.org>
11760
11761         * misc.c: Comment fix.
11762
11763         * som-high.c: (examine_table) Treats crushed tables separates for
11764         purpose of determining header size.
11765         (paginate_horizontally) Allots space for line numbers in crushed
11766         tables with lots of subrows per row.  Calculates the `maximum page
11767         width', the width of the widest horizontal page.
11768         (build_target) Removed trim argument; all references changed.
11769         Stricter assertions.  (dump_crush_page) New function.
11770         (dump_crush_table) Reimplemented.
11771
11772         * som-low.c: (som_dump_page) Uses new RULE_ROW &c. constants.
11773         (som_dump_crush_page) Reimplemented, interface changed.
11774
11775         * somP.h: Many many new helper macros for use with crushed tables.
11776         (global var som) Removed `tv', `cum_y' members; all references
11777         removed.  New members `mpw', `digit_space'.
11778
11779 Sun Sep 29 19:37:03 1996  Ben Pfaff  <blp@gnu.org>
11780
11781         * arena.c: (arena_alloc) [!DISCRETE_BLOCKS] Removed `size'
11782         variable, changed to constant 1024.
11783         (arena_ca_strdup) Changed `sizeof(a_string)' to
11784         `sizeof(c_string)'.
11785         (arena_ca_strdup) [!DISCRETE_BLOCKS] Changed bad cast from
11786         `(c_string *)' to `(char *)'; this fixed some offset problems.
11787
11788         * filename.c: (readlink_malloc) Changed initial allocation from
11789         100 bytes to 128.
11790         (good_getcwd) Changed from xmalloc() to local_alloc(); removed
11791         comment.
11792
11793         * postscript.c: (read_fontmap) Fixed leak by changing &owner to
11794         &fm->owner in several places.
11795
11796         * som-high.c: (output_table) Changed interface to rest of world.
11797         (examine_crush_table) Removed.  Crushed tables are re-broken now,
11798         in preparation for rewrite.
11799
11800         * som.h: Comment fix.
11801
11802 Sat Sep 28 21:28:07 1996  Ben Pfaff  <blp@gnu.org>
11803
11804         * ascii.c: (ascii_init_driver) Disposes of x->file.filename and x
11805         itself in the cleanup stage.
11806
11807         * descript.q: (display) At least temporarily, changed the table
11808         format to a crushed table.
11809
11810         * list.q: (begin_row) At least temporarily, added horizontal lines
11811         between cases.
11812
11813         * som-high.c: (examine_crush_table) Sets som.hh to the width of
11814         the horizontal "headers," that is, to the width of the far left
11815         and far right rules.
11816         (justify_pagination) Sets som.th to the width of the widest row
11817         in the crushed table.  Fixed inner loop off-by-one error.
11818
11819         * som-low.c: (som_dump_crush_page) Added code to draw horizontal
11820         rules.
11821
11822         * somP.h: Comment fix.
11823
11824 Fri Sep 27 20:08:39 1996  Ben Pfaff  <blp@gnu.org>
11825
11826         * filename.c: (open_file_ext) Now, doesn't set f->file to NULL
11827         before closing it; also, opens the constructed filename `s'
11828         instead of f->filename.
11829
11830         * postscript.c: Moved initialization of x->loaded, x->prop,
11831         x->fixed, x->current, also the add_encoding() calls, into
11832         postopen().
11833         (preclose) Destroys x->combos; sets x->loaded, x->combos to NULL;
11834         sets x->last_font to NULL; sets x->next_combo to zero.
11835
11836         * som-high.c: (crushed_row_height) Moved definition farther up.
11837         (som_submit_table) Doesn't calculate line width, font size until
11838         after calling open_page(), to accomodate changes to PostScript
11839         driver.
11840         (vert_headers) Removed; equivalent functionality moved to
11841         examine_table(), examine_crush_table().
11842         (justify_pagination) Replaced with different algorithm.
11843         (dump_crush_table) Bugfix that caused tables to fail to be clipped
11844         at the bottom of the page.
11845
11846 Thu Sep 26 22:20:26 1996  Ben Pfaff  <blp@gnu.org>
11847
11848         * command.c: Added cmd_list back into cmd_table.
11849
11850         * freq.c, frequencies.q, repeat.c, list.q, vars-atr.c, vfm.c:
11851         Comment fix: `#define DEBUGGING' --> `#define DEBUGGING 1'.
11852
11853         * list.q: (flush_table) Updated to new som_submission_form format.
11854
11855         * som-frnt.c: Comment fix.
11856
11857         * som-high.c: Changed `#endif' to `#undef EXTERN'.
11858         (output_table) Calls som_get_table_size() directly; handles
11859         crushed tables.
11860         (examine_crush_table) New function; calls vert_headers().
11861         (examine_table) Moved some code into new function, vert_headers().
11862         (justify_pagination) New function.
11863         (dump_plain_table) Removed `static' from `cy'.
11864         (dump_crush_table) New function.
11865
11866         * som-low.c: (som_dump_crush_page) New function.
11867
11868         * som.h: Comment fixes.
11869         (enum SOM_TOPT_CRUSH) New.
11870         (SOM_SUB_PARTIAL_BEG, SOM_SUB_PARTIAL_MID, SOM_SUB_PARTIAL_END)
11871         Temporarily set to zero to make do with LIST procedure.
11872
11873         * somP.h: Re-ordering.
11874
11875 Wed Sep 25 19:36:11 1996  Ben Pfaff  <blp@gnu.org>
11876
11877         * som.c: Split into som-frnt.c, som-high.c, som-low.c.
11878
11879         * somP.h: New file for use by som-high.c, som-low.c.
11880
11881         * q2c.c: Added definition for VME.
11882         (get_line) Now dumps `!' comment lines to the output file
11883         verbatim.
11884
11885         * crosstabs.q, descript.q, file-handle.q, frequencies.q, list.q,
11886         set.q: Changed format of `!' comment lines.
11887
11888 Tue Sep 24 18:39:09 1996  Ben Pfaff  <blp@gnu.org>
11889
11890         * All source files: Added copyright notice.
11891
11892         * common.c: (xmalloc, xrealloc, xstrdup) Cast size_t's to unsigned
11893         longs in msg() calls.
11894
11895         * con32s.c: (xmalloc, xrealloc) Updated from common.c.
11896
11897         * q2c.c: (xmalloc, xrealloc, xstrdup) Updated from common.c.
11898
11899 Sat Sep 21 23:16:31 1996  Ben Pfaff  <blp@gnu.org>
11900
11901         * output.c: (outp_read_devices) Changed criteria for
11902         distinguishing different types of lines.
11903
11904 Fri Sep 20 22:52:28 1996  Ben Pfaff  <blp@gnu.org>
11905
11906         * cmdline.c: Changed syntax message.
11907
11908         * filename.c: (good_getcwd) Bug fix (?).
11909         (normalize_filename) [__BORLANDC__] Uses _fullpath() library
11910         function.
11911         (search_path) Appends DIR_SEPARATOR to directory name only if it
11912         does not already end with one.
11913
11914         * glob.c: Checks STAT_PAGER envvar before PAGER.
11915
11916         * output.c: Checks environment variables instead of just local
11917         macros.
11918
11919 Tue Sep 10 21:39:00 1996  Ben Pfaff  <blp@gnu.org>
11920
11921         * arena.c: (arena_destroy) Swatted a subtle bug that cropped up
11922         when the pointer passed to the function was within the arena
11923         itself, so that it couldn't properly be set to NULL _after the
11924         arena was freed_.
11925
11926         * command.c: Re-enabled DISPLAY.
11927
11928         * display.c: Rewritten to handle tables.  Untested.
11929
11930         * filename.c: (search_path) Fixed memory leak.
11931
11932         * frequencies.q: (cmd_frequencies) Frees v_variables.
11933         (postcalc) Calls cleanup_freq_tab() after displaying statistics.
11934         (cleanup_freq_tab) New function to garbage collect.
11935         (dump_full) Elegantized.
11936
11937         * main.c: New comment.
11938
11939         * output.h: New tag for tagged quotes: TAG_NEWLINE.
11940
11941         * postscript.c: Comment fix.
11942         (release_fontmap, free_font_entry) New functions.
11943         (ps_init_driver) Sets free_font_entry() as the freefunc for
11944         hashtable `loaded'.  Calls release_fontmap() when destroying a
11945         driver; also frees the output filename; also frees the
11946         ps_driver_ext block.
11947         (free_ps_encoding) Frees the filename as well as the encoding
11948         block.
11949         (output_encodings) Frees the line buffer and pops the msg-filename
11950         stack.
11951         (read_fontmap) Frees the fontmap filename and the line buffer.
11952         (postopen, preclose) Misc. garbage collection fixes.
11953         (ps_open_page) Destroys the `combos' hash table; sets `last_font'
11954         to NULL; this fixes some output problems.
11955         (text) Handles TAG_NEWLINE.  Untested.
11956
11957         * som.c: (cell_byte_size) Merged SCON_VALUE and SCON_TEXT cases.
11958         (som_set_string) Removed.  All references changed to
11959         `som_set_text'.
11960         (som_set_text) Rewritten.  New interface.  More general.
11961
11962         * som.h: Minor format changes.
11963         (struct som_value_cell) Removed; all references changed to
11964         `som_text_cell'.
11965         (enums SOT_*) Changed.
11966
11967 Mon Sep  9 21:43:13 1996  Ben Pfaff  <blp@gnu.org>
11968
11969         * command.c: Re-enabled SPLIT FILE.
11970
11971         * postscript.c: Comment fix.
11972
11973         * som.h: Added `SOT_NONE'.
11974
11975         * split-file.h: (cmd_split_file) Removed superfluous parenthesis.
11976
11977         * vfm.c: (dump_splits) Reimplemented.
11978
11979 Sat Sep  7 22:35:12 1996  Ben Pfaff  <blp@gnu.org>
11980
11981         * Compiled the project under gcc 2.7.2, which gave some new
11982         warnings.  This led to many additions of casts from unsigned to
11983         int sprinkled throughout the code.
11984         
11985         * arena.c: Many uses of `unsigned' changed to `size_t'.
11986
11987         * command.c: Added END FILE, END REPEAT to command table.
11988         (var cmd_end_repeat) Renamed cmd_end_repeat_p.
11989         (find_command, FILE_TYPE_okay) Not commented out anymore.
11990         (parse_cmd) Calls FILE_TYPE_okay again.
11991         (output_line) Added calls to som_output_text() to put the line
11992         in the output files.
11993
11994         * common.c: (macro VME) Format changes.
11995         (xstrdup) Asserts that its argument is not NULL.
11996         
11997         * data-list.c: Implemented dump_fixed_table().
11998         
11999         * inpt-pgm.c: Formatting changes.  Comment changes.
12000         (end_case_proc) Renamed end_case_trns_proc.
12001         (cmd_end_file, end_file_trns_proc) New functions.
12002
12003         * misc.c: Many uses of `int' and `unsigned' changed to `size_t'.
12004
12005         * misc.h: (local_strdup) New macro corresponding to strdup() but
12006         allocating its data through local_alloc() if possible--that is, if
12007         GNU C is in use.
12008
12009         * postscript.c: Comment changes.
12010         (quote_ps_name, quote_ps_string, output_encodings) New functions.
12011         (output_line, add_string) New macros supporting
12012         output_encodings().
12013         (postopen) Fixed contents of ${fixed-font} and ${prop-font}
12014         substitution vars.  Calls output_encodings() when a line
12015         consisting of `!encodings' is encountered.
12016         (preclose) Some code moved into quote_ps_string().
12017         (dump_line) Changed into macro supporting dump_fancy_line().
12018         (switch_font) Now outputs DSC "%%IncludeResource: font (...)"
12019         command when appropriate.
12020         (write_text) Fixed `literal_char' array (I think it's fixed, at
12021         least.)
12022         (text) Fixed bug when width was zero.  Now exits immediately on
12023         zero height_left.  Now, when executing `goto restart;', checks
12024         that cp<end, so that we don't read beyond end-of-string.  Also,
12025         outputs the correct code to the output file by outputting the code
12026         from the metric instead of the internal metric index.
12027
12028         * repeat.c: (cmd_end_repeat) New function.
12029
12030         * som.c: (var som) `headers' renamed `options' and semantics
12031         changed.  All references changed.
12032         (draw_title) `if(px!=-1 || px!=-1)' --> `if(px!=-1 || py!=-1)'.
12033         (build_target) Only inserts spacing if SOM_TOPT_SPACING not
12034         selected.
12035         (som_text_table) Removed.
12036         (som_output_text) New function.
12037
12038         * som.h: (struct som_submission_form) Removed `header', `reuse',
12039         replaced with bitmapped field `options'.
12040         (SOM_TOPT_*) New enum set for som_submission_form.options.
12041         (SOT_*) New enum set for som_output_text().
12042
12043         * temporary.c: (copy_variable) When copying the var label, only
12044         calls xstrdup() if it's non-NULL.
12045
12046         * var.h: (enum type `vartype') Removed; all references changed to
12047         `int'.
12048
12049         * vars-atr.c: (init_variable) Changed local var `nbytes' from
12050         `int' to `size_t'.
12051
12052 Thu Sep  5 22:05:56 1996  Ben Pfaff  <blp@gnu.org>
12053
12054         * font.h: Comment changes.
12055
12056         * groff-font.c: (groff_read_font) Initializes `name' field to
12057         NULL.  Handles `encoding' field.
12058
12059         * hash.c: (hsh_dump) [GLOBAL_DEBUGGING] Output formatting changes.
12060
12061         * postscript.c: (struct font_entry) Removed `position' field.
12062         (struct ps_font_combo) New struct.
12063         (struct ps_driver_ext) Removed field `next_position'.  New fields
12064         `combos', `next_combo'.  `last_font' field changed from
12065         `font_entry *' to `ps_font_combo *'.
12066         (ps_init_driver) Reformatted; handles new fields.  When
12067         OPO_AUTO_ENCODE is set, adds the two default fonts' encodings to
12068         the encoding list.
12069         (get_encoding, find_encoding_file) New functions.
12070         (add_encoding) Some code moved out into find_encoding_file().
12071         (postopen) Changed value for ${title}.
12072         (preclose) Sets `loaded' field to NULL after destroying the hash
12073         table.
12074         (ps_open_page) Added comment.  Inits the `combos' and `next_combo'
12075         fields.
12076         (ps_text_set_font_by_position) Figures out the current family if
12077         not known.
12078         (compare_ps_combo, hash_ps_combo, free_ps_combo) New functions.
12079         (switch_font) Implemented.
12080         (write_text) Calls switch_font() more often.  Format changes.
12081         #undefs its macros after they're no longer useful.
12082         (text) Changed `continue' at one point to a jump to the top of the
12083         loop because we don't want `separate' reset to 0 at that point.
12084         (load_font) No longer sets `position' in the font_entry created.
12085
12086 Wed Sep  4 21:45:35 1996  Ben Pfaff  <blp@gnu.org>
12087
12088         * font.h: (struct font_desc) New member `encoding', which is not
12089         properly handled yet.
12090
12091         * glob.c: (init_glob) Some new i18n code, which is probably
12092         screwed up.
12093
12094         * output.c: (outp_read_devices, outp_get_paper_size) Changed
12095         `size' local from `int' to `size_t'.
12096
12097         * postscript.c: New driver configuration parameter `auto-encode'.
12098         New enums OPO_AUTO_ENCODE, ODA_COUNT.
12099         (struct font_entry) New member `position'.
12100         (struct ps_driver_ext) Reordered.  New hash table member
12101         `encodings'; new members `next_position', `next_encoding',
12102         `last_font'.  Members `current', `prop', `fixed' changed from type
12103         `font_desc *' to `font_entry *'; all references changed.
12104         (struct ps_encoding) New struct.
12105         (read_ps_encodings, compare_ps_encoding, hash_ps_encoding,
12106         free_ps_encoding, add_encoding) New functions.
12107         (ps_init_driver) Added OPO_AUTO_ENCODE to default
12108         x->output_options.  Initializes new members of ps_driver_ext.
12109         Changed default value for prologue_fn, encoding_fn.  Calls
12110         read_ps_encodings after loading default fonts.
12111         (option_tab[], ps_option) Handle new configuration parameter.
12112         (switch_font) New function.
12113         (struct output_char) `font' member changed from `font_desc *' to
12114         `font_entry *'.  New member `separate'.
12115         (read_fontmap) Changed `size' from `int' to `size_t'.
12116         (output_line, put_number) New macros for write_text().
12117         (write_text) Optimizes text output by consolidating multiple
12118         calls to PostScript `show' operator.
12119         (text) Keeps track of when text arguments can't be consolidated by
12120         write_text(), and marks those spots in the output stream.
12121         (load_font) Sets `position' of the allocated font_entry to -1, cuz
12122         the font hasn't been switched to by switch_font(), which is where
12123         the position is important--the PostScript is what cares about the
12124         position.
12125
12126 Sat Aug 31 23:52:38 1996  Ben Pfaff  <blp@gnu.org>
12127
12128         * hash.c: (hsh_destroy) Ignores NULL argument.  Doesn't try to
12129         call a NULL free_func.
12130         (hsh_rehash) Elegantized.
12131         (hsh_probe) Fix bug that manifested when the table was expanded
12132         and thus had to change location in memory.  Good thing
12133         too--otherwise could have been much more subtle.
12134         (hsh_find) [GLOBAL_DEBUGGING] Not stubbed out anymore.
12135         (hsh_foreach) New function for hash table iteration.
12136
12137         * hash.h: (struct hsh_iterator) New.
12138
12139         * lexer.c: (parse_tagged_quote) Font and family name strings in
12140         tags are now null-terminated.
12141
12142         * output.c: (outp_evaluate_dimension) Fixed over-aggressive unit
12143         parsing.
12144         (internal_get_paper_size, outp_get_paper_size) Fixed; now work as
12145         documented.  (Never before tested?)
12146
12147         * output.h: Comment changes.
12148
12149         * postscript.c: New driver options `optimize-text-size',
12150         `optimize-line-size', `max-fonts-simult'.  New enum set for
12151         specing cached line types.  Comment fixes.
12152         (struct line_form) New struct.
12153         (struct ps_driver_struct) New members `text_opt', `line_opt',
12154         `max_fonts', `lines'.
12155         (ps_init_driver) Initializes new members of ps_driver_struct.
12156         (user option type enum set) New member `nonneg_int_arg'.
12157         (static var option_tab[]) Supports new options.
12158         (ps_option) Handles new options.
12159         (find_ps_file) Made static.  No longer calls hsh_dump().
12160         (ps_get_var) Made static.
12161         (preclose) Dumps out proper DSC trailer.
12162         (ps_open_page) Elegantized.
12163         (ps_close_page) Calls dump_lines() if appropriate.
12164         (ps_line_horz, ps_line_vert, ps_line_intersection) Reduced to
12165         wrappers around line().
12166         (int_2_compare, compare_line, dump_line, dump_fancy_line,
12167         dump_lines, hash_line, free_line, line) New functions for support
12168         of line caching.
12169         (write_text, text) Made static.
12170         (text) Added to font support, not finished.
12171
12172 Thu Aug 29 21:36:41 1996  Ben Pfaff  <blp@gnu.org>
12173
12174         * font.h: (struct font_desc) New members ascent, descent.
12175
12176         * groff-font.c: (groff_read_font) Calculates font ascent and
12177         descent from the ascent and descent of the `d' and `p' characters,
12178         respectively, as per a suggestion on comp.fonts.
12179
12180         * postscript.c: (ps_open_page, ps_close_page, ps_line_horz,
12181         ps_line_vert, ps_line_intersection) Rewritten to deal with changed
12182         prologue.
12183         (write_text) Handles text right-justification and centering (not
12184         full justification).  Still very inefficient.  (One output line
12185         per character?!)
12186         (struct output_char) Added fields for font and font size.
12187         (text) Many bugfixes.
12188
12189 Sat Aug 24 23:26:00 1996  Ben Pfaff  <blp@gnu.org>
12190
12191         * cmdline.c: (usage) Calls outp_list_classes().
12192
12193         * font.h: Comment fix.
12194
12195         * groff-font.c: New exported global var `space_index'.
12196         (groff_init) New function to initialize `space_index'.
12197         (hash_kern) Casts result to unsigned.
12198         (font_name_to_index) Renamed font_char_name_to_index.  All
12199         references changed.  Also, now returns the value of `space_index'
12200         when passed an ASCII space character as an argument.  Fixed
12201         handling of nulls.
12202         (font_get_kern_adjust) Changed i from `int' to `unsigned'.
12203         Handles passed NULL pointers properly.
12204
12205         * lexer.c: (parse_tagged_quote) Comment fix.  Better range
12206         checking.
12207
12208         * output.c: (outp_list_drivers) Removed.  Removed all references.
12209         
12210         * output.h: Comment fixes.
12211
12212         * postscript.c: (ps_open_global) Calls groff_init().
12213         (output_char) New structure.
12214         (write_text) New function.
12215         (text) No longer stubbed out!  Now the output is correct--with a
12216         few exceptions, one of them being that the page has to be held
12217         upside down into a mirror.
12218
12219 Sun Aug 11 21:31:22 1996  Ben Pfaff  <blp@gnu.org>
12220
12221         * font.h: Comment fix.
12222         
12223         * font.c: (name_to_index) Renamed font_name_to_index, made extern.
12224         All callers changed.
12225         (number_to_index) Renamed font_number_to_index, made extern.  All
12226         callers changed.
12227         (font_get_kern_adjust, font_get_char_metrics) New functions.
12228
12229         * output.h: New constant OUTP_T_INTERNAL_DRAW.
12230
12231         * postscript.c: Changed default line width back to 1/2 point.
12232         (ps_line_horz, ps_line_vert, ps_line_intersection) Now lines are
12233         in the center of the space allotted for them, not just a fixed
12234         offset from the edge of the space; this fixes some bugs.
12235         (ps_line_intersection) Now supports all command line styles.
12236         (ps_text_get_size) Bug fix in computation of em width.
12237         (text) New function, the meat behind ps_text_metrics and
12238         ps_text_draw.  Not complete.
12239         (ps_text_metrics, ps_text_draw) Removed the stub taken from
12240         ascii.c; call text().
12241
12242 Sat Aug 10 23:28:17 1996  Ben Pfaff  <blp@gnu.org>
12243
12244         * arena.c: (arena_free) Assert that the argument is non-NULL.
12245         
12246         * groff-font.c: (add_kern) Calls arena_free() for old_kern if and
12247         only if old_kern is non-NULL.
12248
12249         * postscript.c: (ps_init_driver) Changed default line width to 1
12250         point.
12251         (postopen) New prologue variables.
12252         (ps_line_horz, ps_line_vert, ps_line_intersection) Implements some
12253         more of the common line styles properly, but not all.
12254         (ps_text_metrics) Fixed problem with this stubbed out version that
12255         kept it from taking font sizes into account.
12256
12257 Thu Aug  8 22:31:11 1996  Ben Pfaff  <blp@gnu.org>
12258
12259         * arena.c: (arena_malloc) Bug fix.
12260         (arena_dump) [GLOBAL_DEBUGGING] New function.
12261
12262         * ascii.c: Comment fix.
12263         (count_fancy_chars, delineate) Now static functions.
12264         
12265         * filename.c: (interp_vars) Bug fixes.
12266
12267         * font.h: Comment fixes.
12268
12269         * glob.c: (init_glob) Sets set_viewwidth, set_viewlength at
12270         beginning in case we have an error message to display before
12271         initializing the display.
12272
12273         * groff-font.c: Comment fix.  Changed rehash threshold from 2/3
12274         full to 1/2 full.
12275         (groff_read_font) Bug fixes.
12276         (name_to_index) Increments hash.used.  Sets `name' field of hash
12277         entry properly.
12278         (add_kern) Sets kern_max_used after rehashing.  Other bug fixes.
12279
12280         * hash.c: Return type changed.
12281
12282         * postscript.c: Continued development.  Now marks lines on the
12283         paper, but very buggy.
12284
12285 Sat Aug  3 20:50:35 1996  Ben Pfaff  <blp@gnu.org>
12286
12287         * Changed comments in many source files from `/* xxx /* yyy */' to
12288         `/* xxx */ /* yyy */' for cleanliness.
12289
12290         * arena.c: (arena_sd_strdup) New function.
12291         
12292         * ascii.c: (struct ascii_driver_ext) New member `file'.
12293         (ascii_init_driver) Fills out member `file' for initing; uses
12294         close_file_ext for closing drivers.
12295         (ascii_option) Changed %.*s back to %s because the a_string's are
12296         always null-terminated.
12297         (postopen, preclose) New functions.
12298         (ascii_open_page) Uses new style of open_file_ext.
12299         (ascii_option, commit_line_buf, output_lines) Use ext->file.file
12300         instead of this->output.
12301         (__assert_fail) Removed.
12302
12303         * cmdline.c: Changed syntax_message[].
12304
12305         * error.c: #include's <readline/history.h> only if the history
12306         library is available, not if just the readline library is
12307         available.
12308
12309         * filename.c: (expand_line) Removed alloca() support.
12310         (interp_vars) No longer tilde-expands argument.  Limit on output
12311         length removed.
12312         (tilde_expand) Now treats argument as path rather than filename.
12313         [!unix] Now is a no-op function.
12314         (search_path) Better verbose message formatting.
12315         (open_file, close_file) Comment fixes.
12316         (close_file) [!unix] Doesn't bother with pipes.
12317         (open_file_ext) Completely rewritten, interface revamped.
12318         (close_file_ext) New function.
12319
12320         * font.h: Comment changes.
12321
12322         * frequencies.q: Removed AIX alloca support since it doesn't use
12323         alloca.
12324
12325         * hash.c: Comment changes & additions.
12326         (hsh_create) Initializes entire table instead of first M entries.
12327         (hsh_probe) Stupid bug fixed.  Now it works.
12328         (hsh_dump) [GLOBAL_DEBUGGING] New function.
12329
12330         * main.c: (parse) Detects EOF properly in token-eating loop.
12331         Should the STOP token have its value changed to 0?
12332
12333         * misc.c: (blp_getdelim) [HAVE_GETDELIM] Now it's a macro.
12334         (blp_getline) Now it's a macro.
12335
12336         * output.h: (struct outp_driver) Removed members output, filename.
12337         
12338         * output.c: (outp_init) [!NO_POSTSCRIPT] Installs PostScript
12339         drivers in driver table.
12340         (outp_read_devices) Frees buf.  Warns if there are no active
12341         output drivers.
12342         (outp_configure_clear) Sets outp_configure_vec to NULL after
12343         deleting its elements.
12344         (configure_driver, destroy_driver) Removed references to output,
12345         filename members of outp_driver.
12346         (outp_evaluate_dimension, internal_get_paper_size,
12347         outp_get_paper_size) New functions.
12348
12349         * postscript.c: Continued development.  Now links but doesn't make
12350         any marks on the page.  Lotsa bugs I suppose.
12351
12352         * str.c: (strcasecmp) [!HAVE_STRCASECMP] New function.
12353
12354         * str.h: Comment changes.
12355
12356 Sat Jul 27 22:32:38 1996  Ben Pfaff  <blp@gnu.org>
12357
12358         * Removed dependencies on non-nested comments in several files.
12359         Also removed references to (unix || __unix__) in #if's since
12360         prefh.orig makes those two equivalent.
12361         
12362         * ascii.c: (ascii_open_global) Creates ascii_arena.
12363         (ascii_close_global) Destroys ascii_arena.
12364         (ascii_init_driver) Doesn't create ascii_arena.
12365         (ascii_copy_driver) Removed.
12366         (ascii_option) Possible bugfix regarding %s vs. %.*s with a_string's.
12367         (outp_class ascii_class) Removed ascii_copy_driver reference.
12368
12369         * frequencies.q: Now can display all statistics except median.
12370         Still not finished.
12371
12372         * output.c: Handles outp_class.ref_count so output class
12373         destructors are called properly.
12374         (add_class) Sets ref_count to 0.
12375         (configure_driver) Initializes class if ref_count++ is 0.
12376         (destroy_driver) Destructs class if --ref_count is 0.  Frees the
12377         class output file name.
12378         
12379         * output.h: (struct outp_class) Removed copy_driver, inited.
12380         Added ref_count.
12381
12382         * postscript.c: Completely replaced but not finished.
12383         
12384 Tue Jul 23 21:48:36 1996  Ben Pfaff  <blp@gnu.org>
12385
12386         * approx.h: #includes <float.h>.
12387
12388         * arena.h, arena.c: Many functions changed to take an arena **
12389         instead of an arena *, for consistency.  All callers changed.
12390         (arena_alloc) Now creates a new arena if passed *A that is NULL.
12391         (arena_destroy) Sets *A to NULL.
12392         
12393         * ascii.c: (delineate) Implements OUTP_T_VERT correctly.  Removed
12394         assertion that `width' be positive.
12395
12396         * command.c: Removed #if's from cmd_table.
12397         (walk_cmdtable_func) [0] New function (debug code).
12398         (init_cmd_parser) [0] Dumps out cmd_table (debug code).
12399         (parse_cmd) Doesn't return failure for unimplemented commands.
12400
12401         * common.h: (SYSMIS) Changed from DBL_MAX to -DBL_MAX.
12402         (SYSCODE) New constant macro.
12403
12404         * descript.q: Checks for positive n_variables before performing
12405         analysis.
12406
12407         * file-handle.q: (get_handle_by_filename) Bug fix: passes &f to
12408         avl_find instead of &fp as arg 2.
12409
12410         * frequencies.g, frequencies.q: Continued updating; now compiles &
12411         works again, but not complete.
12412
12413         * main.c: Changes to user messages.
12414
12415         * misc.c: (reverse) [0] New function.
12416
12417         * settings.h: Comment removed.  #includes "common.h".
12418
12419         * som.c: (som_set_null) New function.
12420         (som_set_value, som_set_string, som_set_text) More detailing
12421         assertions.
12422         (som_set_float) Implemented function.
12423         (dump_columnated_table) Bug fix regarding page breaks.
12424         (draw_cell) Bug fix regarding text that spilled out of a cell.
12425         (draw_intersection, draw_horz_rule, draw_vert_rule) No longer draw
12426         null lines.
12427         (get_cell_size) Support SCON_EMPTY cells.
12428         (get_table_size) When calculating rules' widths and heights, mask
12429         out SLIN_SPACING bit.  Added SOPT_X_HLTL support.
12430         
12431         * som.h: (som_any_cell) New option SOPT_X_HTLT.  Removed
12432         SOPT_X_SHADE.
12433         (struct som_submission_form) New member `header'; all users
12434         changed.
12435
12436         * val-labs.c: (get_label) User messages changed.
12437
12438         * var.h: Changed FREQUENCIES structures.
12439
12440         * vars-atr.c: (is_num_user_missing, is_str_user_missing) Made
12441         inline.
12442         
12443 Fri Jul 19 19:11:13 1996  Ben Pfaff  <blp@gnu.org>
12444
12445         * approx.h: Definition of EPSILON now depends on system's
12446         DBL_EPSILON.  Removed GNU C specific code.
12447         (cmpapx) Renamed approx_compare.
12448
12449         * frequencies.g, frequencies.q: Continued updating; still doesn't
12450         compile.
12451
12452         * groff-font.c: (name_to_index) Fix bug that kept it from
12453         compiling.
12454
12455         * hash.c, hash.h: Completed work.
12456
12457         * var.h: Changes to freq_tab, frequencies_proc.
12458         
12459 Wed Jul 17 21:23:36 1996  Ben Pfaff  <blp@gnu.org>
12460
12461         New hashing code.
12462         * hash.c, hash.h: New files.  Not completed.
12463         * Makefile.am: Added hash.c to source file list.
12464         * font.h: (struct font_desc) New member kern_size_p.
12465         * groff-font.c: Uses hash.h.
12466         (hashpjw) Moved to hash.c.
12467         (next_prime_power) Rewrote, renamed hsh_next_prime, moved to
12468         hash.c.
12469         (static var hash) New member size_p.
12470         * var.h: Includes hash.h.
12471         (struct freq_tab) Changed AVL_TREE to hash_tab.
12472
12473         * vars-prs.c: Comment, formatting fixes.
12474
12475         * frequencies.g, frequencies.q: Continued updating.  Not yet
12476         working.
12477
12478         * formats.c: Bug fix.
12479
12480 Tue Jul 16 22:10:04 1996  Ben Pfaff  <blp@gnu.org>
12481
12482         Increasing parallelism between DESCRIPTIVES and FREQUENCIES.
12483         * descript.g: Comment fixes.
12484         * descript.q: Comment fixes.  Moved some declarations into var.h.
12485         Made dsc_info a static table.  Updated FIXMEs.
12486         (internal_cmd_descriptives) Beautified.
12487         
12488         * frequencies.q: Started updating into working order.
12489         * frequencies.g: New file analogous to descript.g.
12490         * var.h: Comment fixes.  Added structures for FREQUENCIES.
12491         
12492         * som.c: Removed vestiges of crushing and partial table support.
12493
12494 Sun Jul 14 15:45:31 1996  Ben Pfaff  <blp@gnu.org>
12495
12496         * Many more changes to som.c especially, but these will not be
12497         documented as I have resolved to remove them.  This patchlevel is
12498         being released solely so that I can fall back to it if I decide
12499         that removing the changes is not a good idea.
12500
12501 Sat Jul 13 09:58:44 1996  Ben Pfaff  <blp@gnu.org>
12502
12503         * som.c: (global var som) New member `cum_y'.
12504         (build_target) Properly handles titles for partial tables.
12505         (dump_partial_beg, dump_partial_mid, dump_partial_end)
12506         Merged into single new function dump_partial().  Fixed problem
12507         with titles on partial tables.
12508         (dump_table) Calls dump_partial() for all parts of partial tables.
12509         (dump_page) Criteria for drawing title changed.
12510         
12511 Fri Jul 12 22:03:36 1996  Ben Pfaff  <blp@gnu.org>
12512
12513         * command.c: (cmd_table) Added LIST, WEIGHT.
12514
12515         * command.c: (cmd_remark) No longer frees `s' since it's not
12516         dynamically allocated.
12517         
12518         * data-out.c: (convert_f) Now correctly handles the case where
12519         abs(v->f)<1 but v->f rounds to a value of 1.00 given the specified
12520         number of decimals.
12521         (som_destroy_all_tables) Removed argument.  All callers changed.
12522         (som_vline, som_hline) Argument validity checking corrected.
12523         (som_set_value) Implemented half-heartedly.
12524         (replicate_table) Copies tables piece-by-piece when using Checker.
12525
12526         * som.h: New line style SLIN_1THIN, currently equivalent to
12527         SLIN_0.  New enum set SOM_SUB_*.
12528         (struct som_submission_form) Removed `seq_no'.  Added `type'.
12529         
12530         * list.q: Newly working file; uses partial tables.
12531         
12532         * som.c: (som_reduce_table) Renamed som_set_table_height().
12533         (som_crush) Removed argument `group'.
12534         (global var som) Removed `nt', `seq_no'.  Added `type'.
12535         (som_submit_table) Arguments changed.
12536         (output_table) Removed partial table code.
12537         (build_target) New arg; partial table support added.  All callers
12538         changed.
12539         (dump_plain_table) Removed partial table code.
12540         (dump_partial_beg, dump_partial_mid, dump_partial_end) New functions.
12541         (dump_table) Supports partial tables.
12542         (dump_page) New argument to allow not drawing top and/or bottom
12543         headers.  All callers changed.  Supports partial tables.
12544
12545 Sat Jul  6 22:22:25 1996  Ben Pfaff  <blp@gnu.org>
12546
12547         * data-out.c: Changed `#include <approx.h>' to `#include
12548         "approx.h".
12549         (convert_F) Comment fix.  Now won't print `-.000', etc.
12550
12551         * descript.q: Now Z-scores work, although there appears to
12552         be a bug (which might actually be in data-out.c:convert_F()).
12553         (descriptives_trns_proc, descriptives_trns_free) New functions.
12554         (run_z_pass) Implemented.
12555         
12556         * var.h: Comment fixes.
12557         (dsc_z_score, descriptives_trns) New structs.
12558         (descriptives_trns) Added to any_trns as `dsc'.
12559
12560         * error.c, error.h: New error class, IS (Installation Script
12561         error), used in those instances where the error is in the
12562         installation, but there is a script file or installation file that
12563         can be usefully referred to.
12564         
12565         * output.c: Change many IE classes to IS classes.
12566
12567         * cases.c, command.c, common.c, crosstabs.q, expr-evl.c,
12568         frequencies.q, list.q, vars-prs.c, vfm.c: Removed reference to
12569         HAVE_MALLOC_H because Borland C++ alloca() is broken, so why
12570         include the corresponding header?
12571         
12572         * glob.c: (init_glob) Don't malloc term_buffer under Checker.
12573         Don't bail out if termcap can't be read.
12574
12575         * som.c: (som_destroy_table) Removed.
12576         (som_reduce_table, som_destroy_all_tables) New functions.
12577         (som_crush) New function, not implemented.
12578         
12579         * som.h: New table option STAB_CRUSH.  Comment fix.  New struct
12580         som_submission_form.  Function prototypes revised.
12581
12582         Outputting huge tables (1000s of rows) a few rows at a time
12583         is supported, though untested.  May even break everything.
12584         Actually, the code doesn't even compile right now.
12585         * som.c: (struct som) New fields htv, nt, seq_no.
12586         (som_submit_table) Multiple arguments changed to a single
12587         pointer to struct submission_form.  Only increments subtable_num
12588         if seq_no is zero.  Only destroys table if it's not going to
12589         be reused.
12590         (replicate_table) New function.
12591         (output_table) Comment fix.
12592         (examine_table) Changed inline code to code calling
12593         replicate_table().  Calculates htv.  Supports partial tables.
12594         (draw_title) Removed comment.
12595         (build_target) Only allows for title on first part of partial
12596         tables.
12597         (dump_plain_table) Only resets table chunk number on first part
12598         of partial tables; FIXME: doesn't work quite right.  Supports
12599         partial tables.
12600         (dump_page) Titles only on first part of partial tables.
12601
12602 Fri Jul  5 20:16:19 1996  Ben Pfaff  <blp@gnu.org>
12603
12604         * Thanks to an unreliable IDE hard drive, I have spent the last
12605         day reconstructing my Debian GNU/Linux installation and redoing
12606         the previous day's changes--somehow I managed to save every file
12607         except for output.c and output.h.  So the following changes could
12608         really be considered independent of the output.c, output.h changes
12609         from Jul 4.
12610
12611         * output.h, output.c: Moved the outp_configure_vec global var,
12612         outp_names struct, and enum set OUTP_S_* from output.h to output.c.
12613         outp_configure_vec is now static.
12614         
12615 Thu Jul  4 20:20:24 1996  Ben Pfaff  <blp@gnu.org>
12616
12617         * The entire philosophy behind configuration of the output drivers
12618         changed.  Now there is a termcap-type configuration where drivers
12619         to be read are determined beforehand, rather than parsing the
12620         entire output init file and storing it in memory & deciding what
12621         to actually use later.  Faster & more memory-efficient at the same
12622         time, cool.
12623         
12624         * output.c: Comment fix.  Removed outp_init_drivers global var.
12625         Removed all references to synonyms.  New structure outp_defn.  New
12626         global vars outp_macros, outp_configure_vec.
12627         (search_name, delete_name, add_name, check_configure_vec,
12628         expand_name, find_defn_value) New static functions.
12629         (outp_configure_clear, outp_configure_add, outp_configure_macro,
12630         outp_read_devices) New extern functions.
12631         (outp_init) Much functionality moved into outp_read_devices.
12632         (outp_read_devices) Format of output init file changed; name of
12633         file is `devices' rather than `output' to avoid Makefile
12634         conflicts.
12635         (outp_clear) Renamed outp_done.
12636         (outp_list_classes) Bug fix, cleaned up.
12637         (outp_list_drivers) Not implemented anymore.
12638         (outp_configure_driver) Now a static function; simplified; now
12639         interpolates macros; supports new structure.
12640         (outp_enable_driver, match_synonym) Removed; all references
12641         removed.
12642         (find_driver) First argument removed.
12643         
12644         * output.h: Global var outp_init_drivers removed; new structure
12645         outp_names; new enum set OUTP_S_*; new global var
12646         outp_configure_vec; function prototypes for output.c exports
12647         updated.
12648         
12649         * main.c: (main) Calls outp_read_devices() after parsing the
12650         command line.
12651         
12652         * cmdline.c: (parse_command_line) New option -v --verbose;
12653         --version changed to -V.  --device option changed syntax to just
12654         take a single device name.  Accepts key=value declaration of
12655         output init file macros.  Syntax message updated.
12656
12657         * filename.c: (expand_line) New function.
12658         (interp_environ_vars) Renamed interp_vars; no longer uses
12659         fixed-size buffer.
12660         (blp_getenv) Allows $ARCH and $VER pseudo-environment-vars to be
12661         overridden by real environment vars.
12662         (search_path) Uses verbose_msg() instead of #ifdef'd printf().
12663         * filename.h: interp_environ_vars() renamed interp_vars().
12664         
12665         * error.c, error.h: Added extern variable `verbosity', message
12666         class MM.
12667         
12668         * error.c: (vmsg) Support message class MM.
12669         (verbose_msg) New function.
12670
12671         * descript.q: (generate_z_varname) Bug fix in generation of
12672         Z-score varnames.
12673         (dump_z_table) Bug fix in column headers.
12674         
12675         * ascii.c: (ascii_init_driver) Changed minimum number of lines per
12676         page from 29 to 15.  Don't set a default for ops[OPS_INIT,
12677         OPS_DONE].  Writes the uninit string when the driver is closed.
12678         (ascii_open_page) Write the init string before the first page.
12679         (output_shorts) Form of main loop changed from `while' to `for'.
12680         Bug fix with overstrikes: the character is printed *after* the
12681         backspace.  Eliminated a lot of `& 0xff' modifiers.
12682         (advance_to_left_margin) New function.
12683         (return_carriage, output_lines) Handle left margin.
12684
12685 Thu Jul  4 00:35:59 1996  Ben Pfaff  <blp@gnu.org>
12686
12687         * ascii.c: New option `carriage-return-style'.
12688
12689         * ascii.c: (count_fancy_chars) New function.
12690         (delineate, text_metrics) Use new function; bug fixes regarding
12691         rich text strings.
12692         (text_draw) Bug fix with rich text.
12693         (output_string, output_shorts) Reordered.
12694         (output_shorts) Now handles boxchars and some overstrike font
12695         changes.
12696         (output_char, return_carriage) New functions.
12697         (output_lines) Now handles overstriking and font changes properly;
12698         some code moved to output_shorts.
12699
12700 Tue Jul  2 22:13:23 1996  Ben Pfaff  <blp@gnu.org>
12701
12702         [GLOBAL_DEBUGGING]
12703         * ascii.c: New member `debug' in ascii_driver_ext.
12704         (ascii_init_driver, delineate) Uses new member.
12705
12706         Now you can set a vertical height on writing text.
12707         * ascii.c: (delineate) Keeps track of vertical position.
12708         (text_draw) No longer considers fully justified text an internal
12709         error.
12710         
12711         * output.h: New flag OUTP_T_VERT; other OUTP_T_ values changed.
12712
12713         Tables' titles are drawn; they can have variable height.
12714         * som.c: `som' struct has new member, title_height.
12715         (draw_title) New argument.  Moved within file.  All caller
12716         changed.
12717         (build_target) New argument, amount of space needed for first row.
12718         Calculates height of title, takes that into account.  All callers
12719         changed.
12720         (dump_plain_table, dump_columnated_table) Took calculation of y1,
12721         y2 out of loop.
12722         (dump_columnated_table) [GLOBAL_DEBUGGING] Debugging code
12723         improved.
12724         (dump_columnated_table) Organized for readability.
12725         (dump_page) Makes use of som.title_height.
12726
12727         * som.c: Many comment bug fixes.
12728
12729         * descript.q: (try_name, generate_z_name) Bug fix regarding
12730         generation of Z-score variable names.
12731         * var.h: Removed num from descriptives_proc; all referents removed.
12732
12733 Mon Jul  1 22:13:39 1996  Ben Pfaff  <blp@gnu.org>
12734
12735         * ascii.c: (ascii_line_horz, ascii_line_vert,
12736         ascii_line_intersection) Added debugging code.
12737
12738         Added a descriptive line above each table to describe it.
12739         * command.c: (parse_cmd) Calls som_new_series.
12740         
12741         * som.c: New static vars table_num, subtable_num.  New `som'
12742         member `title'.
12743         (dump_page) New arguments.
12744         (som_submit_table) Handle new variables.
12745         
12746         * som.c, som.h: (som_submit_table) New arguments.  All callers
12747         changed.
12748         (som_new_series) New function.
12749         (build_target) Makes room for extra line.
12750         (draw_title) New function.
12751         (dump_page) Calls draw_title.  Bug fix: doesn't always set
12752         som.ext->cp to 0.
12753         
12754         Columnation of tables support.
12755         * som.h: Deleted fr, lr, ri from som_table.  Reorganized.
12756         
12757         * som.c: Deleted references to fr, lr, ri.
12758         (som_columnate) Bux fix: sets group member of table.
12759         (som_add_options) Function removed.
12760         (dump_table) Split into three functions; extensively reworked.
12761         
12762         * descript.q: (dump_z_table) Better output table formatting; added
12763         title support to correspond to som.h changes.
12764         (display) Title support.
12765
12766         * output.h: Added OUTP_T_NONE.
12767         
12768 Mon Jul  1 13:00:00 1996  Ben Pfaff  <blp@gnu.org>
12769
12770         * descript.q: Improved handling of Z scores; still not perfect.
12771         
12772         * output.h, ascii.c: Added hook for getting em width of current
12773         font.
12774         
12775         * som.c: Uses new em-width hook.  Added debugging code to
12776         several functions.
12777         (som_columnate) New argument.
12778         (som_add_options) Removed.
12779
12780 Jun 29 17:40:47 1996  Ben Pfaff  <blp@gnu.org>
12781
12782         * som.h, som.c, output.c, output.h, ascii.c: Updated to work with
12783         rules as a property of the table instead of as a property of the
12784         cells.
12785         
12786         * ascii.c: Added `header' to table of options.
12787         
12788         * descript.q: Added even shorter statistic names; modified to work
12789         with new som interface.
12790         
12791         * misc.c (blp_getdelim): Bug fix.
12792         
12793         * version.c: includes 'conf.h'.
12794         
12795 ----------------------------------------------------------------------
12796 Local Variables:
12797 mode: change-log
12798 version-control: never
12799 End: