NEWS: Move the mention of the new sheet to the next release

Merge remote-tracking branch 'origin/master' into sheet

system-file-format: More string fields with null bytes spotted.

Manoharan <s.manoharan@auckland.ac.nz> reported that he has also seen
system files that contain string fields with compressed null bytes, so
reword the description to make this sound less exotic.

Update version number to 0.10.5-pre3.

This pre-release is primarily to get the CVE-2017-10791 and CVE-2017-10792
fixes into a tarball for folks who find tarballs easier to work with.

linreg: Comment out unused function to avoid compiler warning.

sys-file-reader: Ignore duplicate value labels written by ReadStat.

The ReadStat software writes duplicate value labels due to a
misunderstanding of string widths.  This change make PSPP ignore these
duplicates.

sys-file-reader: Tolerate nominal case size of 0 without warning.

The software at https://github.com/WizardMac/ReadStat seems to always write
0, so there's not much value in warning.

sys-file-reader: Accept document records with no document lines.

This allows PSPP to accept system files that appear to be produced by the
ReadStat software at https://github.com/WizardMac/ReadStat.

Thanks to ftr for reporting this bug via pspp-users at:
http://lists.gnu.org/archive/html/pspp-users/2017-07/msg00002.html

Linreg.c: Remove QR decomposition optimisation.

Fixes bug #51373.

linreg.c: Fix typo

doc/expressions.texi: Correct documentation of MISSING and SYSMIS functions.

spv-file-format: Improve description of file format.

doc: Mark SPSS Viewer format chapter properly as an appendix.

Otherwise some of the output looked a little confused when it went through
TeX.

doc: Keep copyright and license comments from showing up in TeX output.

The "\input texinfo" line is what changes the comment syntax from TeX
syntax to Texinfo syntax, so it has to go before the @c comments or else
those comments show up in output produced by TeX.

spv-file-format: Improve description of structure member format.

tests: Use path search for zip-test instead of full path.

This allows "check-valgrind" to work properly since it relies on putting
wrappers early in $PATH.

Update to newest Gnulib.

Harry Thijssen reported an issue with the previous version on Windows.
John Darrington suggested an update, since the Gnulib developers have been
working through related problems.

doc/statistics.texi: Add comma after @xref.

Apparently older versions of makeinfo insist on this.

Reported-by: Harry Thijssen
Fix-by: Ben Pfaff

tests: Avoid failure based on encoding name differences.

glibc and Mac OS X call the ASCII encoding by different names, which caused
differing output and a test failure.  This fixes the problem.

Reported by Jeremy Lavergne.

spv-file-format: Add much more detail.

zip-reader: Use xstrdup() instead of strdup().

Move XML declarations to the start of .ui files.

Apparently xgettext complains if comments start the file.

Fix erroneous subsitute by previous commit.

Commit 691a034d7f2139076fa012739dffd40ef5db4a9b  inadvertenntly
commented out the first line of every .at file.  This commit
fixes that.

Add copyright and licence notices to files which lack them.

The savannah hackers have been recently complaining about lack of copyright/licence notices.

tests: Add tests against regression for two previously fixed bugs.

sys-file-reader: Fix integer overflows in parse_long_string_missing_values().

Crafted system files caused integer overflow errors that in turn caused
aborts.  This fixes the problem.

CVE-2017-10791.
See also https://bugzilla.redhat.com/show_bug.cgi?id=1467004.
See also https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=866890.
See also https://security-tracker.debian.org/tracker/CVE-2017-10791.
Found by team OWL337, using the collAFL fuzzer.

sys-file-reader: Avoid null dereference skipping bad extension record 18.

read_record() assumed that read_extension_record() never set its output
argument to NULL when it returned true, but this is possible in an error
case.

CVE-2017-10792.
See also https://bugzilla.redhat.com/show_bug.cgi?id=1467005.
See also https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=866890.
See also https://security-tracker.debian.org/tracker/CVE-2017-10792.
Reported by team OWL337, with fuzzer collAFL.

Update version number to 0.10.5-pre2.

This prerelease is to update the Gnulib version, to fix the GCC 7 problems.

README.Git: Recommend newer Gnulib, to avoid GCC 7 segfaults.

Reported by Matthias Klose <doko@debian.org>
at https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=853623.

Bug #51318.

perl-module: Avoid VERSION redefinition warning from compiler.

If the PSPP version includes a suffix like "-pre1", then Perl will strip
that suffix from the version it passes to the compiler using -DVERSION=...,
and <config.h> will re-define it with the full version string.  This causes
a warning.

This change avoids the warning.  I am not yet aware of a new problem that
it causes.

Enable the show value labels feature

FACTOR: Improve calculation of Kaiser-Meyer-Olkin and add a test

FACTOR: Add Anti-image matrix output

Updated German translation from translationproject.org

Add documentation for MATRIX DATA /N

MATRIX DATA: Add /N subcommand

Allow dialog boxes to be cancelled by hitting the Escape key.

Closes bug #51225

Fixed perl regression problem due to Version name - Fixes Bug #51218

The regression failed in some perl tests due to an incompatible
pspp version number. I changed to a version number that includes
a "-". The problem is described in acinclude.m4. See

  The PSPP autobuilder appends a build number to the PSPP version number,
  e.g. "0.7.2-build40".  But Perl won't parse version numbers that contain
  anything other than digits and periods, so "-build" causes an error.  So we
  define $(VERSION_FOR_PERL) that drops everything from the hyphen onward.
  VERSION_FOR_PERL=`echo "$VERSION" | sed 's/-.*//'`
  AC_SUBST([VERSION_FOR_PERL])

The version name was 0.10.5pre1 without a "-". Therefore the version name
for perl results in a problem.

Change the return type of psppire_delimited_text_new.

... and deal with the consequences.

Import assistant: Disable the search function of treeviews

Whitespace changes only

PsppireDelimitedText (count_delims): Make the iteration multibyte character safe

PsppireDelimitedText (count_delims): Reverse sense of test condition

PsppireDelimitedText: Extend the functionality such that it copes with quotes.

Currently the set of characters it considers quotes is hard coded.

PsppireImportAssistant: Avoid possible null pointer dereferences

PsppireImportAssistant: Use a more reliable way of setting the number of cases.

PsppireDelimitedText: Remove g_print statements

PsppireDelimitedText: use the maximum_lines property of the child as the number of items in the model

Import Assistant: Mark lines beyond the declared maximum as insensitive

Import Assistant: Don't try to parse non-existant files

Import assistant: Simplify the construction of the introductory page

Add SPREAD_SHEET_WIDGET_CFLAGS to the flags used for building the GUI

Mention the changes to the sheet in NEWS

Merge remote-tracking branch 'origin/master' into sheet

Use a more reliable way of setting the initial state of PsppireDialogAction objects.

Fix bug where the Examine subdialogs appeared multiple times.

Update translations from translationproject.org

Mention a version number for the spread sheet widget dependency

INSTALL: Mention the spread-sheet-widget dependency

Removed GtkXPaned which is currently not used

Deal with formal release of upstream library

Update identifiers to reflect new identity of upstream package

PsppireImportAssistant: New function psppire_import_assistant_run

Remove duplicate accelerator from the one-way anova menuitem.

Reported-by: Yuri Chornoivan

case.c: variable_matches_case -> assert_variable_matches_case

This function was only used in assertions.   Having the function itself assert, rather
than returning a boolean makes debugging easier, because one need not guess which
term of the assertion has failed.

PsppireImportAssistant: Remove some unnecessary #include directives

Import Assistant: Remove unused prototypes

Import Assistant: Allow separators to be unicode characters

Import Assistant: Fix generation of variable names

Remove psppire-empty-list-store which is now unused

Import Assistant: Remove struct column which is now unused

Remove some unused code

Update version number to 0.10.5pre1, for translations.

K Independent Samples Dialog: Fix compiler warnings.

Import assistant: Re-enable automatic inference of the separators

Import Assistant: Fix generation of /DELIMITERS subcommand

Remove some unused code

Import Assistant: Re-add the format guesser feature

ImportAssistant: Set the GtkPaned slider to half way

ImportAssistant: make division between var and data sheets clearer

constness

Remove some unused variables

PsppireImportAssistant: Remove the "transient-for" property.

Add a callback when variables change

Populate the data sheet in the import assistant

Merge remote-tracking branch 'origin/master' into sheet

Updated the Dutch translation from translationproject.org

Remove commented out code

Fix potential crash if matrix file variables are of unexpected types

Fix buffer overflow which could occur if the matrix reader encounters a badly formed file.

Remove unreachable code

matrix-reader: Use strcpy() on char arrays, in next_matrix_from_reader().

Fixes GCC warning "pointer targets in passing argument 1 of 'strcpy'
differ in signedness".

factor: Fix return type of do_factor_by_matrix().

This function had a "bool" return type but nothing used it.

Fixes GCC warning "'return' with no value, in function returning non-void".

Reported by Jeremy Lavergne.

New Dialog: Non Parametric | K Indepdendent Samples

PsppireValueEntry: Use a more reliable way to override parent property.

Setting the property in the _new function doesn't work if the object is constructed
via GtkBuilder for example.

Zip Reader: initialise error string earlier.

Fixed a bug which could have caused a crash if pspp were presented
with a corrupt zip file.

Fixed bug which caused a crash in GET DATA

MEANS: Prevent parser from entering infinite loop.

Fixes bug #51008
.

src/math/linreg.c: Don't calculate the intercept for regression through the origin

src/math/linreg.c: Encapsulate this object better.