sys-file-reader: Avoid null dereference skipping bad extension record 18.

read_record() assumed that read_extension_record() never set its output
argument to NULL when it returned true, but this is possible in an error
case.

CVE-2017-10792.
See also https://bugzilla.redhat.com/show_bug.cgi?id=1467005.
See also https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=866890.
See also https://security-tracker.debian.org/tracker/CVE-2017-10792.
Reported by team OWL337, with fuzzer collAFL.

Update version number to 0.10.5-pre2.

This prerelease is to update the Gnulib version, to fix the GCC 7 problems.

README.Git: Recommend newer Gnulib, to avoid GCC 7 segfaults.

Reported by Matthias Klose <doko@debian.org>
at https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=853623.

Bug #51318.

perl-module: Avoid VERSION redefinition warning from compiler.

If the PSPP version includes a suffix like "-pre1", then Perl will strip
that suffix from the version it passes to the compiler using -DVERSION=...,
and <config.h> will re-define it with the full version string.  This causes
a warning.

This change avoids the warning.  I am not yet aware of a new problem that
it causes.

FACTOR: Improve calculation of Kaiser-Meyer-Olkin and add a test

FACTOR: Add Anti-image matrix output

Updated German translation from translationproject.org

Add documentation for MATRIX DATA /N

MATRIX DATA: Add /N subcommand

Allow dialog boxes to be cancelled by hitting the Escape key.

Closes bug #51225

Fixed perl regression problem due to Version name - Fixes Bug #51218

The regression failed in some perl tests due to an incompatible
pspp version number. I changed to a version number that includes
a "-". The problem is described in acinclude.m4. See

  The PSPP autobuilder appends a build number to the PSPP version number,
  e.g. "0.7.2-build40".  But Perl won't parse version numbers that contain
  anything other than digits and periods, so "-build" causes an error.  So we
  define $(VERSION_FOR_PERL) that drops everything from the hyphen onward.
  VERSION_FOR_PERL=`echo "$VERSION" | sed 's/-.*//'`
  AC_SUBST([VERSION_FOR_PERL])

The version name was 0.10.5pre1 without a "-". Therefore the version name
for perl results in a problem.

Use a more reliable way of setting the initial state of PsppireDialogAction objects.

Fix bug where the Examine subdialogs appeared multiple times.

Update translations from translationproject.org

Remove duplicate accelerator from the one-way anova menuitem.

Reported-by: Yuri Chornoivan

Update version number to 0.10.5pre1, for translations.

K Independent Samples Dialog: Fix compiler warnings.

Updated the Dutch translation from translationproject.org

Remove commented out code

Fix potential crash if matrix file variables are of unexpected types

Fix buffer overflow which could occur if the matrix reader encounters a badly formed file.

Remove unreachable code

matrix-reader: Use strcpy() on char arrays, in next_matrix_from_reader().

Fixes GCC warning "pointer targets in passing argument 1 of 'strcpy'
differ in signedness".

factor: Fix return type of do_factor_by_matrix().

This function had a "bool" return type but nothing used it.

Fixes GCC warning "'return' with no value, in function returning non-void".

Reported by Jeremy Lavergne.

New Dialog: Non Parametric | K Indepdendent Samples

PsppireValueEntry: Use a more reliable way to override parent property.

Setting the property in the _new function doesn't work if the object is constructed
via GtkBuilder for example.

Zip Reader: initialise error string earlier.

Fixed a bug which could have caused a crash if pspp were presented
with a corrupt zip file.

Fixed bug which caused a crash in GET DATA

MEANS: Prevent parser from entering infinite loop.

Fixes bug #51008
.

src/math/linreg.c: Don't calculate the intercept for regression through the origin

src/math/linreg.c: Encapsulate this object better.

REGRESSION: Implement /ORIGIN subcommand.

DESCRIPTIVES: Fix a bug where the parser could enter an infinite loop

FACTOR: Don't try to perform analysis if there are no variables.

FACTOR: Do not try to run an analysis if no matrix is present

FACTOR: Fix a crash when bad input was presented

FACTOR: Make idata parameters const where they can be.

DATA MATRIX: Avoid crash on invalid input

Fix memory leaks in FACTOR/MATRIX

Remove unused variable

FACTOR: Use consistent indexing when displaying matrices.

In any sane use case this will make no difference, since
all covariance and correlation matrices are symetrical.
However for correctness and ease of debugging this helps.

matrix reader: Fix bug which incorrectly read in matrix material.

MATRIX DATA: Allow non-symetric matrices if /FORMAT = FULL.

Matrix reader, fix comment to reflect reality.

MATRIX DATA: Cope with long variable names

FACTOR: Allow an option '=' after MATRIX

REGRESSION: Allow independent variables to be specified on the ENTER subcommand.

This is more typical of the syntax that third party software generates.

FACTOR: Add printout of the covariance matrix and add a test

FACTOR: New subcommand: MATRIX IN

New function covariance_from_correlation

New module matrix-reader

Added a new module to help read the files created by MATRIX DATA

MATRIX DATA: Fix crash when duplicate variables are specified

MATRIX DATA: Handle multiple splits properly

MATRIX DATA: Rewrite to canonical rowtype values

Updated the French translation from translationproject.org

Added the MATRIX DATA procedure.

parse_DATA_LIST_vars: Reduce scope of variable 'name2'

Whitespace changes only: Remove trailing whitespace

Do not allow value labels dialog to enter a label for an invalid value.

Fixes bug #45429

Remove inappropriate single selection-mode properties from dialog actions.

Closes bug #50029

Don't try to use TIOCGWINSZ if termios.h is not available.

Fix grammatical error in NEWS

tests: Do not delete testsuite on distclean.

The testsuite is distributed, so distclean must not delete it.

Thanks to Harry Thijssen <pspp4windows@gmail.com> for reporting the problem.

Edit|Options: Add fields to change behaviour of output window.

New menu: Edit|Options

Add a new menu to set global options.  Currently it only affects the display
of variables in Dictionary Views.

Html Driver: Fix bug when rendering small cells.

This fix avoids a bug where the driver would enter a tight loop when rendering cells
with zero height or width.

Updated NEWS file.

Terminal interface: Remove support for the ncurses library.

This library was supported for trivial reasons.  It always gave rise
to portability issues and was a pain to support.  Furthermore there
is a simpler way to do what we used it for.  So now we use that way
instead.

Mann Whitney: Remove unused variable

Fixed a bug in the Mann-Whitney test vs. missing=analysis.

When missing values were deleted from the dataset, they were deleted after the
ranks for the U value had been inserted, - thus the wrong rank sum would be
calculated.  This change deletes missing values *before* the ranks are inserted.

The issue this fixes is described at
http://lists.gnu.org/archive/html/pspp-users/2017-03/msg00009.html

FREQUENCIES: fixed VARIANCE output - fixes bug #50366

The FREQUENCIES command output the mean instead of variance result when
variance was requested. The bug and a patch was reported on savannah.
I added a test to identify the problem and the proposed patch.

fixes bug #50366

tests: Avoid infinite loop in test.

tests: Ensure that the testsuite is of non-zero size

psppire-import-assistant: Use maximised window instead of full_screen.

A number of users had complained about the full screen window.
Fixes bug #48230

po: Add new variable LOCALPOFILES to hold locally managed .po files

This variable holds .po files not managed by translationproject.org

Ensure that help page manifest is not empty.

For some reason I have found that sometimes doc/help-pages-list
is zero bytes long.   I don't know how this happens, but this
change should catch it and allow us to find out why.

po: Update translations from translationproject.org.

Update all translations using "make po-update".

This only adds an "X-Bugs:" line to the translations, which were otherwise
up-to-date except that cs.po and en_GB.po aren't actually in
translationproject.  I'll have to ask John Darrington about that.

po: Add po-update rule for updating all translations.

po: Update translations from translationproject.org.

Fix misleadingly indented statements.

GCC 6.2.1 reported {}-braced blocks that looked like they were guarded by
preceding "if" statements but really weren't.  This fixes the misleading
indentation.

gui: Remove unused static variables.

Reported by GCC 6.2.1.

gui: Fix #includes for gtksourceview.

Newer versions of gtksourceview only allow gtksource.h to be included
directly, so this commit changes PSPPIRE to only include that header.

po: Update German translation from translationproject.org.

typo in XEXPORT documentation

This typo was reported in the mailing list in message:
http://lists.gnu.org/archive/html/bug-gnu-pspp/2016-11/msg00001.html
Thank you for reporting the typo!

fixed func macro in documentation - closes bug #49549

The func macro did not handle the argument correctly. All arguments were literally
replaced with NAME. I tested this on MacOS with the generated pdf.

Closes bug #49549

compile without gnumeric and odf read support

This patch fixes the problem described in bug #49550. When libxml2 is
not installed, the gnumeric and odf read support is disabled. This was
not handled correctly. I changed the compilation requirements and the
error message handling if somebody tries to open a file.

Closes bug #49550.

reversed CFLAGS, CPPFLAGS and LDFLAGS addition for q2c.c build

Ben mentioned that this will break the cross compile build. So
I reverted this change.

added CFLAGS, CPPFLAGS and LDFLAGS for PSPP.C and q2c.c compilation

The hardening check during the debian build process showed that the
hardening compile flags are not issued to the compilation process of
PSPP.c (the perl module) and q2c.c (the lexer). Although q2c.c is only
relevant during the build process hardening this will not hurt.

perl - added current directory path to calls

The perl INC path in debian does not include the current directory
anymore. Therefore I added the current directory path at the places
where a module is called and it is assumed that . is part of INC.

See: https://lwn.net/Articles/698853/

po: Update Spanish translation from translationproject.org.

help: added t-test reference to help page

The help button for the t-test dialogs ended on the main page. I added
a reference such that it lands on the t-test page in the documentation.

examples: t-test.sps fixed make process to include in distribution

I forgot to add the t-test.sps example in the automake.mk file to
include it in the distribution.

t-test example: Change some wrong comments

I had some wrong comments describing the code.

Examples: Added t-Test example code

I added a simple t-Test example code with some plots as a
kind of beginners tutorial.

po: Add Greek translation and update Catalan and Spanish translations.

From translationproject.org.

Fix missing buttonbox in frequencies dialog

psppire-output-view: Avoid GtkWarnings

PSQL READER: Use the REPEATABLE READ isolation level.

Apparently SERIALIZABLE doesn't work if the server is in
"hot standby" mode.

Fix bugs in frequencies dialog.

This seems to have crept in, in commit dc6d0e08956c6ad42cc943b7496a192c71bdbe02

Thanks to Harry for reporting it.