sparse-xarray: Add missing #include <limits.h>.
[pspp-builds.git] / NEWS
1 PSPP NEWS -- history of user-visible changes.
2 Time-stamp: <2009-05-24 22:25:04 blp>
3 Copyright (C) 1996-9, 2000, 2008, 2009 Free Software Foundation, Inc.
4 See the end for copying conditions.
5
6 Please send PSPP bug reports to bug-gnu-pspp@gnu.org.
7
8 Changes from 0.7.1 to 0.7.2:
9
10  * Updated Perl module interface.
11
12  * Value labels for long string variables are now supported.
13
14  * Missing values for long string variables are now supported.
15
16 Changes from 0.7.0 to 0.7.1:
17
18  *  Added a perl module to facilitate reading and writing of pspp system 
19     files from perl programs.
20
21 Changes from 0.6.1 to 0.7.0:
22
23   * Custom variable and data file attributes are now supported.
24     Commands VARIABLE ATTRIBUTE and DATAFILE ATTRIBUTE have been added
25     for setting and clear attributes.  Support for attributes has also
26     been added to commands that read and write system files, such as
27     SAVE and GET, as well as to the DISPLAY command.
28
29 Changes from 0.6.0 to 0.6.1:
30
31   * Statistical bug fixes:
32
33     - Report correct standardized regression coefficients in linear
34       regression output (bug #23567).
35
36   * Bug fixes that affect PSPP and PSPPIRE:
37
38     - Avoid crash with pie charts (bug #24014).
39
40     - Don't append % to count totals (bug #24003).
41
42     - Don't crash on bad input (bug #24031).
43
44     - Don't crash if "end data." is not left aligned (bug #24115).
45
46     - Change default workspace value to 64 MB, to avoid unnecessary
47       disk accesses on modern machines.
48
49   * PSPPIRE bug fixes:
50
51     - Add ".sav" or ".por" suffix to filename when saving with Save_As
52       (bug #23137).
53
54     - Make it possible to reopen the output window on Windows (bug
55       #24033).
56
57     - A POSIX regular expression library is now included and used
58       automatically if the host does not have one or has one that is
59       inadequate.
60
61   * Build fixes and changes:
62
63     - Work around bug in GSL that prevented build with recent GCC
64       versions without manually adding -fgnu89-inline to CFLAGS.
65
66     - Also warn about missing prerequisites as we encounter them (bug
67       #24445).
68
69     - Distribute necessary files to allow users working from the
70       distributed tarball to configure with --enable-gui-tools.
71
72     - Append $(EXEEXT_FOR_BUILD) to output file name when building
73       q2c, fixing build problems on Windows.
74
75     - GSL 1.8 or later is now required.
76
77     - Build errors with --enable-relocatable were fixed.
78
79   * The German translations were removed, since native German speakers
80     found them too poor to be useful.
81
82 Changes from 0.4.0 to 0.6.0:
83
84   * The PSPP license is now version 3 or later of the GNU General
85     Public License.  Previously, it was version 2 or later.
86
87   * PSPP now has a graphical interface, called PSPPIRE.  This
88     interface allows you to enter data and variable definitions
89     interactively.  Commands may be executed in syntax form, or by
90     using the interactive dialog boxes available from the dropdown
91     menus.
92
93   * A few sample syntax files are now included in the `examples'
94     directory.
95
96   * Numerous major and minor bugs have been fixed.
97
98   Build changes:
99
100     * The INSTALL file now reflects the details of how to install
101       PSPP.  It is a tailored version of the generic installation
102       instructions, instead of a verbatim copy.
103
104     * iconv, which is ordinarily installed as part of a Unix-like
105       system, is now required.  If you don't have it already, you can
106       install GNU libiconv (http://www.gnu.org/software/libiconv/).
107
108     * libxml2 and zlib are new optional dependencies.  They are
109       required to use PSPP's support for reading Gnumeric files.
110
111   Statistical procedure changes:
112
113     * REGRESSION is a new procedure for fitting linear models to data
114       via least-squares estimation.
115
116     * NPAR TESTS is a new procedure for non-parametric tests.  In this
117       release, it supports binomial and chi-square tests.
118
119     * RANK is a new procedure to rank variables.  It supports numerous
120       forms of ranking.
121
122     * FREQUENCIES can now output histograms and pie charts.  These
123       features were present in earlier releases, but not documented.
124
125   User interface changes:
126
127     * In many situations where PSPP once terminated with a fatal
128       error, PSPP now recovers and continues execution.
129
130     * PSPP is now able to start up and run even if it cannot find its
131       configuration files.
132
133     * Journaling of interactive commands to a disk file is now
134       implemented.  By default, journaling is enabled, to a file named
135       `pspp.jnl' in the current directory.  SET JOURNAL may be used to
136       control journaling.
137
138     * The use of `+' between syntax file names on the command line to
139       prevent the dictionary from being cleared between their
140       executions is no longer supported.  All syntax files are now
141       executed as if `+' had been specified.
142
143     * The -d/--define and -u/--undef command line options are no
144       longer supported.  Instead, use /usr/bin/env or shell primitives
145       to define or clear environment variables before invoking PSPP.
146
147     * If a syntax file named named `rc' is found in a configuration
148       directory (such as $HOME/.pspp), it is executed before any
149       syntax file specified on the command line.  The -r or
150       --no-statrc command line option may be used to disable this
151       behavior.
152
153   Output changes:
154
155     * Output configuration options have changed.  Please refer to the
156       manual for a full description of the available options.
157
158       In consequence, you will need to reinstall your "devices" file.
159       "make install" will do this for you.
160
161     * Most error messages are now written to PSPP output files by
162       default.  SET ERROR can be used to disable this behavior.
163
164     * When invoked interactively, PSPP now by default produces output
165       on the terminal, piping it through the "more" program.
166       Previously, by default output was written only to file
167       pspp.list.  On most terminals, the page length used for output
168       automatically adapts to the terminal size, even if the terminal
169       is resized.
170
171     * ASCII driver:
172
173       - This driver now supports charts in output.  Charts are written
174         as separate files that the main output file refers to.  By
175         default, charts are written in PNG format to files named
176         pspp-1.png, pspp-2.png, and so on.
177
178       - Configurations are provided that use VT100 (and xterm)
179         line-drawing characters in tables.  The option "-o list-vt100"
180         requests use of this device for output to pspp.list.
181
182     * PostScript driver:
183
184       - The default paper size is now determined using the PAPERSIZE
185         environment variable, or the LC_PAPER locale category on
186         systems that support it.  If these are not set, the default is
187         now A4, instead of US letter.  To make US letter the default,
188         set PAPERSIZE to "letter" in your environment.
189
190       - Font metrics are now read from AFM files, instead of
191         Groff-format metrics files.  PostScript fonts can now be
192         embedded in output.
193
194         In consequence, you will need to install an AFM file for each
195         font used in PostScript output.  "make install" will install
196         AFM files for the standard PostScript fonts, including the
197         ones that the PostScript driver uses by default.
198
199       - Standard paper sizes no longer need to be specified through a
200         configuration file.  The "papersize" configuration file is no
201         longer needed, or supported.
202
203       - The PostScript prologue is no longer obtained from the
204         "ps-prologue" configuration file.  This configuration file is
205         no longer needed, or supported.
206
207     * HTML driver:
208
209       - The HTML prologue is no longer obtained from the
210         "html-prologue" configuration file.  This configuration file
211         is no longer needed, or supported.
212
213   Command language changes:
214
215     * The following commands are new:
216
217       - GET DATA, which currently supports reading Gnumeric files and
218         text data files.  It will be extended later to read other
219         types of foreign data.
220
221       - CD, to change the current directory.
222
223       - INSERT, to execute a syntax file.
224
225       - DELETE VARIABLES, to remove variables from the active file
226         dictionary.
227
228       - ADD DOCUMENT, to add text to active file documents.
229
230       - CLOSE FILE HANDLE (a PSPP extension; see below).
231
232       - XEXPORT, a PSPP extension that is a transformation equivalent
233         to EXPORT.
234
235     * The following functions for transformation expressions are new:
236
237       - DATEDIFF, for computing the difference of two dates.
238
239       - DATESUM, for advancing a date by a specified duration.
240
241       - VALUELABEL, to obtain the value label for a value.
242
243     * PSPP now supports very long string variables (over 255 bytes
244       long).
245
246     * MATCH FILES now supports the FIRST and LAST subcommands.
247
248     * Previous versions of PSPP prohibited using commands to both read and
249       write a single file at the same time.  Now, PSPP allows this, and
250       the new version of the file atomically replaces the old version.
251
252     * The following commands are no longer available.  They will be
253       re-implemented in a later release:
254
255       - CLEAR TRANSFORMATIONS
256
257       - MATRIX DATA
258
259       - REPEATING DATA
260
261     * The PROCESS IF command, which was deprecated, has been removed.
262       You may replace any usage of it by SELECT IF following
263       TEMPORARY, which has the same effect.
264
265     * The output format for variables created by VECTOR may now be
266       specified as part of the VECTOR syntax.
267
268   "Scratch files", a new PSPP extension:
269
270     A scratch file, like a system file, consists of a dictionary and
271     any number of cases.  Small scratch files are stored in memory;
272     one that grows too large is written to disk.  By default, any file
273     handle whose name begins with # is assumed to refer to a scratch
274     file.
275
276     Scratch files can be used just about anywhere a system or portable
277     file can be used.  Also, portable files are now allowed in most
278     places that system files were allowed in previous PSPP version.
279
280     A new CLOSE FILE HANDLE command allows the storage associated with
281     scratch files to be freed.  It also allows file handles to be
282     reassigned to new files.
283
284     For more information on scratch files, refer to the "File Handles"
285     section in the PSPP manual.  For specifics of what commands now
286     allow what kinds of files to be specified, refer to the
287     documentation on those particular commands.
288
289   Data access changes:
290
291     * Binary formats and IBM/360 formats, including ASCII/EBCDIC
292       translation, are now supported.  Use FILE HANDLE to specify the
293       format of these files.
294
295     * Little-endian, big-endian, and VAX-endian formats are now
296       supported for integer binary formats when reading and writing
297       data files.  The new RIB and WIB subcommands on the SET command
298       control endianness of integer data.  The default is the host's
299       native endianness.
300
301     * IEEE 754, VAX, and IBM hexadecimal formats are now supported for
302       floating point binary formats when reading and writing data
303       files.  The new RRB and WRB subcommands on the SET command
304       control the floating point format.  The default is the host's
305       native floating point format.
306
307     * DATA LIST now supports the SKIP subcommand, to skip records at
308       the beginning of a file.  For compatibility, DATA LIST now
309       treats N format as F format for FREE and LIST format input.
310
311     * The SAVE and XSAVE commands now support the UNSELECTED,
312       PERMISSIONS, NAMES, and MAP subcommands.
313
314     * The EXPORT command has been re-implemented to obtain better
315       results.  Support for the UNSELECTED, DIGITS, and TYPE
316       subcommands has been added.
317
318     * For compatibility, PRINT now inserts a space at the beginning of
319       every output line, even lines that would otherwise be blank,
320       when OUTFILE is specified.  (The behavior of WRITE is
321       unchanged.)
322
323     * For compatibility, PRINT EJECT now inserts the digit `1' at the
324       beginning of each line that should begin a new page.
325
326     * For compatibility, WRITE now outputs the system-missing value as
327       a field filled with spaces.  Binary formats are an exception.
328       (The behavior of PRINT is unchanged.)
329
330   Documentation:
331
332     * Input and output format descriptions have been rewritten.  They
333       now precisely describe what is accepted on input and written on
334       output.
335
336     * The descriptions of the PSPP system and portable file formats
337       have been extensively revised and improved.
338
339   For developers, the build system now requires Autoconf 2.60 and
340   Automake 1.10.
341 \f
342 Changes from 0.3.0 to 0.4.0:
343
344   Changes in build dependencies:
345
346     * The GNU Scientific Library (libgsl), version 1.6 or later, is
347       now required.
348
349     * libplot from GNU plotutils is optional.  Without it, the new
350       graphing features will not work.  If you do not have it
351       installed, you must run `configure' with --without-libplot.
352
353     * libgmp2 is no longer a dependency.
354
355   Newly implemented commands and statistical features:
356
357     * EXAMINE, including its graphing features.
358
359     * FREQUENCIES now supports percentiles.
360
361     * ONEWAY.
362
363     * PERMISSIONS.
364
365     * SHOW.
366
367     * SORT CASES now sorts stably, that is, two cases with equal sort
368       criteria will be in the same relative order before and after the
369       sort.
370
371     * T-TEST (re-written).
372
373     * DATE and USE.  These commands are parsed but otherwise ignored,
374       to enhance compatibility with certain command files that invoke
375       them unnecessarily.
376
377     * VARIABLE WIDTH, VARIABLE ALIGNMENT, and VARIABLE LEVEL.  These
378       currently have no effect on PSPP output, but their values are
379       written to and read from system files and thus may affect
380       third-party software.
381
382     * SET EPOCH implemented.
383
384     * DATA LIST FREE and DATA LIST LIST now support arbitrary field
385       delimiters.
386
387     * FILE HANDLE now supports custom tab widths.
388
389   Long variable names (and other identifiers) are now supported.  Up
390   to the first 64 bytes of each identifier is significant.  PSPP now
391   reads and writes system files compatible with SPSS version 12.
392
393   New --algorithm and --syntax command line options allow
394   SPSS-compatible or enhanced modes to be selected.
395
396   Support for transformation expressions has been rewritten and
397   significantly improved.  Refer to the manual for details.
398
399   Calculation of moments (mean, standard deviation, kurtosis,
400   skewness) has been rewritten and should now be more accurate.  In
401   --algorithm=enhanced mode moments may be more accurate than SPSS in
402   some cases.
403
404   Numerous bugs have been fixed, too many to mention here.  Many new
405   tests have been added, leading to the discovery and fixing of many
406   of these bugs.
407
408   The ASCII output driver can now squeeze multiple blank lines into
409   single blank lines.
410
411   Much of the code has been rewritten and refactored.  It is now much
412   cleaner.
413
414   The FILE TYPE and REPEATING DATA commands have been disabled for
415   this release because their implementations were deemed too buggy to
416   be useful.  They will be fixed and replaced in a future release.
417
418   New pspp-mode for Emacs (in pspp-mode.el).
419
420   Added rudimentary command-line completion for interactive input.
421
422   lib/julcal and lib/dcdflib are no longer used, so they have been
423   removed.
424
425   For developers, the build system now requires Autoconf 2.58 and
426   Automake 1.7.  The included gettext has been updated to version
427   0.12.1.
428
429   Some reports state that Texinfo 4.8, the latest version, may be
430   necessary to successfully format the documentation on some systems.
431
432 Version 0.3.0 changes since 0.2.3:
433
434   Bugs fixed:
435
436     * Using alphanumeric variables in functions under AGGREGATE
437       segfaulted.  Fixed.
438
439     * Under certain circumstances, the final case would be omitted
440       from the results of an AGGREGATE operation.  Fixed.
441
442     * Undefined behavior was invoked by referencing a freed pointer
443       under certain circumstances.  Fixed.
444
445     * A wrong record size was displayed when paging the active file to
446       disk.  Fixed.
447
448     * Not having enough temporary space for sorting caused a core
449       dump.  Fixed.
450
451     * Syntax errors in function descriptions on AGGREGATE caused core
452       dumps.  Fixed.
453
454     * A null pointer was dereferenced, causing a core dump, when
455       PERCENTILES was specified on FREQUENCIES.  This fixes the
456       problem, but PSPP still doesn't calculate percentiles.
457
458     * SORT always sorted in ascending order.  Fixed.
459
460     * Some minor memory leaks in the expression parser were removed.
461
462     * Many assertions fixed for strict ANSI C compliance.
463
464   New features:
465
466     * SET ECHO ON now implemented, but turned off by default.
467
468     * PRINT specifier supported on END REPEAT.
469
470   Other:
471
472     * System libgmp2 library is used if installed instead of
473       unconditionally using the included libgmp2 subset.
474
475     * Extensive code cleanup, which continues.
476
477     * Added CORRELATIONS command parser, but not implemented.
478
479 Version 0.2.3 changes since 0.2.2:
480
481   Bugs fixed:
482
483     * SPLIT FILE with a string variable caused a core dump.  Fixed.
484
485     * Nested INCLUDEs didn't work.  Fixed.
486
487     * The MATCH FILES procedure set the values of variables not present
488       to 0.  It should have been SYSMIS.  This is now fixed.
489
490     * The REMARK command was too aggressive about skipping lines.  It
491       didn't like being the last command in a file.
492
493     * Comment parsing wasn't consistent with the rest of the code in its
494       idea of where one command ends and another starts.  This meant
495       that sometimes commands would be mysteriously ignored.  Thanks to
496       Dr. Dirk Melcher <BZN-mdksh@t-online.de> for reporting this bug.
497
498     * The TABLE subcommand on MATCH FILES worked only erratically at
499       best.  This fixes it.  Thanks to Dr. Dirk Melcher
500       <BZN-mdksh@t-online.de> for reporting this bug.
501
502     * VARIABLE LABELS rejected a slash before the first variable
503       specification, contradicting the documentation.  Thanks to Walter
504       M. Gray <graywm@northernc.on.ca> for reporting this bug.
505
506     * Because of an incorrect optimization in memory allocation,
507       CROSSTABS sometimes segfaulted when asked to output multiple
508       tables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
509       reporting this bug.
510
511     * CROSSTABS didn't display value labels for column and row
512       variables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
513       reporting this bug.
514
515     * WRITE didn't write line ends.  Fixed.  Thanks to Dr. Dirk Melcher
516       <BZN-mdksh@t-online.de> for reporting this bug.
517
518     * The TABLE subcommand on MATCH FILES worked only erratically at
519       best.  This fixes it.  Thanks to Dr. Dirk Melcher
520       <BZN-mdksh@t-online.de> for reporting this bug.
521
522     * VARIABLE LABELS rejected a slash before the first variable
523       specification, contradicting the documentation.  Thanks to Walter
524       M. Gray <graywm@northernc.on.ca> for reporting this bug.
525
526     * Because of an incorrect optimization in memory allocation,
527       CROSSTABS sometimes segfaulted when asked to output multiple
528       tables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
529       reporting this bug.
530
531     * CROSSTABS didn't display value labels for column and row
532       variables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
533       reporting this bug.
534
535     * WRITE didn't write line ends.  Fixed.  Thanks to Dr. Dirk Melcher
536       <BZN-mdksh@t-online.de> for reporting this bug.
537
538     * MATCH FILES corrupted memory and dumped core on some syntax
539       errors.  Fixed.
540
541     * MATCH FILES should set numeric values not available to the
542       system-missing value, not to 0.  Thanks to Dr. Dirk Melcher
543       <BZN-mdksh@t-online.de> for reporting this bug.
544
545     * KEEP didn't work properly on the SAVE procedure.  Fixed.  Thanks
546       to Ralf Geschke <ralf@kuerbis.org> for reporting this bug.
547
548     * Memory leak fix.
549
550     * Some systems didn't like the way open_file was coded.  Thanks to
551       Hankin <hankin@rogue.consultco.com> for pointing this out.
552
553     * The SAVE procedure didn't save long string variables properly.
554       Fixed by this patch.  Thanks to Hankin
555       <hankin@rogue.consultco.com> for this patch.
556
557     * Minor documentation fixes for MATCH FILES.
558
559 Version 0.2.2 changes since 0.2.1:
560
561   Bugs fixed:
562
563     * Fix behavior of PRINT SPACE for negative arguments.
564
565     * Fix reading some unusual system files.
566
567     * Fix LIST problems with very long variables.  Thanks to Hankin
568       <hankin@dunno.com> for this bug report.
569
570     * Fix problems with some string format specifiers.
571
572     * Fix use of $CASENUM in expressions.  Thanks to Dirk Melcher
573       <BZN-mdksh@t-online.de> for reporting this bug.
574
575     * Additional DATA LIST FREE and DATA LIST LIST fixes.  Thanks to
576       Hankin <hankin@dunno.com> again on this one.
577
578     * Sometimes you may encounter a PSPP script that has to be
579       interpreted in interactive mode.  Now you can use the -i flag to
580       do this.
581
582     * Warnings for egcs 1.1.1 cleaned up.  (However you'll get lots of
583       `unused variable' warnings under gcc 2.7.2.3, fixing this will
584       take more effort.)
585
586     * Tests fixed.
587
588     * The files in gmp need the internationalization directory in
589       their include path.  Thanks to OKUJI Yoshinori
590       <okuji@kuicr.kyoto-u.ac.jp> for pointing this out.
591
592 Version 0.2.1 changes since 0.2.0:
593
594   Bugs fixed:
595
596     * Remember to include examples/ directory in distribution :-)
597
598     * Fixed gmp compile problems for some non-i386 architectures.
599       Thanks to Hans Olav Eggestad <olav@jordforsk.nlh.no> and others
600       for reporting this.
601
602     * DATA LIST FREE and DATA LIST LIST parsing of input files is now
603       matches the documented behavior exactly, and error messages are
604       more helpful.  Thanks to Mark H. Wood <mwood@IUPUI.Edu>.
605
606 Version 0.2.0 changes since 0.1.0:
607
608   Procedures now implemented:
609     * CROSSTABS.  Please see documentation for caveats.
610
611   Transformations and utilities now implemented:
612     * AGGREGATE
613     * APPLY DICTIONARY
614     * CLEAR TRANSFORMATIONS
615     * DISPLAY (all subcommands).
616     * ERASE
617     * FLIP
618     * EXPORT
619     * HOST
620     * IMPORT
621     * MATCH FILES
622     * MATRIX DATA
623     * NEW FILE
624     * REPEATING DATA
625
626   Support for input and output through pipes: "|command" and
627   "command|" filenames; support for special filenames "-", "stdin",
628   "stdout", "stderr".
629
630   New command-line features:
631     * New option --testing-mode: Invoke heuristics to assist testing.
632     * New option --safer, -s: Don't allow certain unsafe operations.
633     * New option --command=CMD, -c CMD: Perform literal command CMD.
634     * rc file ~/.pspp/rc is executed before any other files.
635     * Now multiple syntax files can be specified.
636
637   Operator LAG is now implemented.
638
639   Added missing FILE subcommand to REREAD.
640
641   Table output manager completely rewritten.
642
643   Device configuration file syntax changed.  You will need to
644   reinstall your `devices' file.
645
646   New output driver for HTML.
647
648   PostScript driver and prologue simplified.
649
650   Many bugs fixed.  General source-code cleanup.
651
652   Added Texinfo documentation for:
653     * PSPP system file format
654     * PSPP portable file format
655     * How to write input for q2c parser generator
656     * HTML driver
657
658   PSPP language is now fully documented.  Please report any
659   inaccuracies or omissions in the documentation.
660
661 Changes for version 0.1.0:
662
663   First public release.  For changes from unreleased development
664   versions, please see ONEWS.
665 \f
666 ----------------------------------------------------------------------
667 Copyright information:
668
669 Copyright (C) 1996-9, 2000 Free Software Foundation, Inc.
670
671    Permission is granted to anyone to make or distribute verbatim
672    copies of this document as received, in any medium, provided that
673    the copyright notice and this permission notice are preserved, thus
674    giving the recipient permission to redistribute in turn.
675
676    Permission is granted to distribute modified versions of this
677    document, or of portions of it, under the above conditions,
678    provided also that they carry prominent notices stating who last
679    changed them.
680 \f
681 Local variables:
682 version-control: never
683 mode: indented-text
684 end: