ctables syntax diagram
[pspp] / doc / statistics.texi
1 @c PSPP - a program for statistical analysis.
2 @c Copyright (C) 2017, 2020 Free Software Foundation, Inc.
3 @c Permission is granted to copy, distribute and/or modify this document
4 @c under the terms of the GNU Free Documentation License, Version 1.3
5 @c or any later version published by the Free Software Foundation;
6 @c with no Invariant Sections, no Front-Cover Texts, and no Back-Cover Texts.
7 @c A copy of the license is included in the section entitled "GNU
8 @c Free Documentation License".
9 @c
10 @node Statistics
11 @chapter Statistics
12
13 This chapter documents the statistical procedures that @pspp{} supports so
14 far.
15
16 @menu
17 * DESCRIPTIVES::                Descriptive statistics.
18 * FREQUENCIES::                 Frequency tables.
19 * EXAMINE::                     Testing data for normality.
20 * GRAPH::                       Plot data.
21 * CORRELATIONS::                Correlation tables.
22 * CROSSTABS::                   Crosstabulation tables.
23 * CTABLES::                     Custom tables.
24 * FACTOR::                      Factor analysis and Principal Components analysis.
25 * GLM::                         Univariate Linear Models.
26 * LOGISTIC REGRESSION::         Bivariate Logistic Regression.
27 * MEANS::                       Average values and other statistics.
28 * NPAR TESTS::                  Nonparametric tests.
29 * T-TEST::                      Test hypotheses about means.
30 * ONEWAY::                      One way analysis of variance.
31 * QUICK CLUSTER::               K-Means clustering.
32 * RANK::                        Compute rank scores.
33 * REGRESSION::                  Linear regression.
34 * RELIABILITY::                 Reliability analysis.
35 * ROC::                         Receiver Operating Characteristic.
36 @end menu
37
38 @node DESCRIPTIVES
39 @section DESCRIPTIVES
40
41 @vindex DESCRIPTIVES
42 @display
43 DESCRIPTIVES
44         /VARIABLES=@var{var_list}
45         /MISSING=@{VARIABLE,LISTWISE@} @{INCLUDE,NOINCLUDE@}
46         /FORMAT=@{LABELS,NOLABELS@} @{NOINDEX,INDEX@} @{LINE,SERIAL@}
47         /SAVE
48         /STATISTICS=@{ALL,MEAN,SEMEAN,STDDEV,VARIANCE,KURTOSIS,
49                      SKEWNESS,RANGE,MINIMUM,MAXIMUM,SUM,DEFAULT,
50                      SESKEWNESS,SEKURTOSIS@}
51         /SORT=@{NONE,MEAN,SEMEAN,STDDEV,VARIANCE,KURTOSIS,SKEWNESS,
52                RANGE,MINIMUM,MAXIMUM,SUM,SESKEWNESS,SEKURTOSIS,NAME@}
53               @{A,D@}
54 @end display
55
56 The @cmd{DESCRIPTIVES} procedure reads the active dataset and outputs
57 linear descriptive statistics requested by the user.  In addition, it can optionally
58 compute Z-scores.
59
60 The @subcmd{VARIABLES} subcommand, which is required, specifies the list of
61 variables to be analyzed.  Keyword @subcmd{VARIABLES} is optional.
62
63 All other subcommands are optional:
64
65 The @subcmd{MISSING} subcommand determines the handling of missing variables.  If
66 @subcmd{INCLUDE} is set, then user-missing values are included in the
67 calculations.  If @subcmd{NOINCLUDE} is set, which is the default, user-missing
68 values are excluded.  If @subcmd{VARIABLE} is set, then missing values are
69 excluded on a variable by variable basis; if @subcmd{LISTWISE} is set, then
70 the entire case is excluded whenever any value in that case has a
71 system-missing or, if @subcmd{INCLUDE} is set, user-missing value.
72
73 The @subcmd{FORMAT} subcommand has no effect.  It is accepted for
74 backward compatibility.
75
76 The @subcmd{SAVE} subcommand causes @cmd{DESCRIPTIVES} to calculate Z scores for all
77 the specified variables.  The Z scores are saved to new variables.
78 Variable names are generated by trying first the original variable name
79 with Z prepended and truncated to a maximum of 8 characters, then the
80 names ZSC000 through ZSC999, STDZ00 through STDZ09, ZZZZ00 through
81 ZZZZ09, ZQZQ00 through ZQZQ09, in that sequence.  In addition, Z score
82 variable names can be specified explicitly on @subcmd{VARIABLES} in the variable
83 list by enclosing them in parentheses after each variable.
84 When Z scores are calculated, @pspp{} ignores @cmd{TEMPORARY},
85 treating temporary transformations as permanent.
86
87 The @subcmd{STATISTICS} subcommand specifies the statistics to be displayed:
88
89 @table @code
90 @item @subcmd{ALL}
91 All of the statistics below.
92 @item @subcmd{MEAN}
93 Arithmetic mean.
94 @item @subcmd{SEMEAN}
95 Standard error of the mean.
96 @item @subcmd{STDDEV}
97 Standard deviation.
98 @item @subcmd{VARIANCE}
99 Variance.
100 @item @subcmd{KURTOSIS}
101 Kurtosis and standard error of the kurtosis.
102 @item @subcmd{SKEWNESS}
103 Skewness and standard error of the skewness.
104 @item @subcmd{RANGE}
105 Range.
106 @item MINIMUM
107 Minimum value.
108 @item MAXIMUM
109 Maximum value.
110 @item SUM
111 Sum.
112 @item DEFAULT
113 Mean, standard deviation of the mean, minimum, maximum.
114 @item SEKURTOSIS
115 Standard error of the kurtosis.
116 @item SESKEWNESS
117 Standard error of the skewness.
118 @end table
119
120 The @subcmd{SORT} subcommand specifies how the statistics should be sorted.  Most
121 of the possible values should be self-explanatory.  @subcmd{NAME} causes the
122 statistics to be sorted by name.  By default, the statistics are listed
123 in the order that they are specified on the @subcmd{VARIABLES} subcommand.
124 The @subcmd{A} and @subcmd{D} settings request an ascending or descending
125 sort order, respectively.
126
127 @subsection Descriptives Example
128
129 The @file{physiology.sav} file contains various physiological data for a sample
130 of persons.   Running the @cmd{DESCRIPTIVES} command on the variables @exvar{height}
131 and @exvar{temperature} with the default options allows one to see simple linear
132 statistics for these two variables.  In @ref{descriptives:ex}, these variables
133 are specfied on the @subcmd{VARIABLES} subcommand and the @subcmd{SAVE} option
134 has been used, to request that Z scores be calculated.
135
136 After the command has completed, this example runs @cmd{DESCRIPTIVES} again, this
137 time on the @exvar{zheight} and @exvar{ztemperature} variables,
138 which are the two normalized (Z-score) variables generated by the
139 first @cmd{DESCRIPTIVES} command.
140
141 @float Example, descriptives:ex
142 @psppsyntax {descriptives.sps}
143 @caption {Running two @cmd{DESCRIPTIVES} commands, one with the @subcmd{SAVE} subcommand}
144 @end float
145
146 @float Screenshot, descriptives:scr
147 @psppimage {descriptives}
148 @caption {The Descriptives dialog box with two variables and Z-Scores option selected}
149 @end float
150
151 In @ref{descriptives:res}, we can see that there are 40 valid data for each of the variables
152 and no missing values.   The mean average of the height and temperature is 16677.12
153 and 37.02 respectively.  The descriptive statistics for temperature seem reasonable.
154 However there is a very high standard deviation for @exvar{height} and a suspiciously
155 low minimum.  This is due to a data entry error in the
156 data (@pxref{Identifying incorrect data}).
157
158 In the second Descriptive Statistics command, one can see that the mean and standard
159 deviation of both Z score variables is 0 and 1 respectively.  All Z score statistics
160 should have these properties since they are normalized versions of the original scores.
161
162 @float Result, descriptives:res
163 @psppoutput {descriptives}
164 @caption {Descriptives statistics including two normalized variables (Z-scores)}
165 @end float
166
167 @node FREQUENCIES
168 @section FREQUENCIES
169
170 @vindex FREQUENCIES
171 @display
172 FREQUENCIES
173         /VARIABLES=@var{var_list}
174         /FORMAT=@{TABLE,NOTABLE,LIMIT(@var{limit})@}
175                 @{AVALUE,DVALUE,AFREQ,DFREQ@}
176         /MISSING=@{EXCLUDE,INCLUDE@}
177         /STATISTICS=@{DEFAULT,MEAN,SEMEAN,MEDIAN,MODE,STDDEV,VARIANCE,
178                      KURTOSIS,SKEWNESS,RANGE,MINIMUM,MAXIMUM,SUM,
179                      SESKEWNESS,SEKURTOSIS,ALL,NONE@}
180         /NTILES=@var{ntiles}
181         /PERCENTILES=percent@dots{}
182         /HISTOGRAM=[MINIMUM(@var{x_min})] [MAXIMUM(@var{x_max})]
183                    [@{FREQ[(@var{y_max})],PERCENT[(@var{y_max})]@}] [@{NONORMAL,NORMAL@}]
184         /PIECHART=[MINIMUM(@var{x_min})] [MAXIMUM(@var{x_max})]
185                   [@{FREQ,PERCENT@}] [@{NOMISSING,MISSING@}]
186         /BARCHART=[MINIMUM(@var{x_min})] [MAXIMUM(@var{x_max})]
187                   [@{FREQ,PERCENT@}]
188         /ORDER=@{ANALYSIS,VARIABLE@}
189
190
191 (These options are not currently implemented.)
192         /HBAR=@dots{}
193         /GROUPED=@dots{}
194 @end display
195
196 The @cmd{FREQUENCIES} procedure outputs frequency tables for specified
197 variables.
198 @cmd{FREQUENCIES} can also calculate and display descriptive statistics
199 (including median and mode) and percentiles, and various graphical representations
200 of the frequency distribution.
201
202 The @subcmd{VARIABLES} subcommand is the only required subcommand.  Specify the
203 variables to be analyzed.
204
205 The @subcmd{FORMAT} subcommand controls the output format.  It has several
206 possible settings:
207
208 @itemize @subcmd{}
209 @item
210 @subcmd{TABLE}, the default, causes a frequency table to be output for every
211 variable specified.  @subcmd{NOTABLE} prevents them from being output.  @subcmd{LIMIT}
212 with a numeric argument causes them to be output except when there are
213 more than the specified number of values in the table.
214
215 @item
216 Normally frequency tables are sorted in ascending order by value.  This
217 is @subcmd{AVALUE}.  @subcmd{DVALUE} tables are sorted in descending order by value.
218 @subcmd{AFREQ} and @subcmd{DFREQ} tables are sorted in ascending and descending order,
219 respectively, by frequency count.
220 @end itemize
221
222 The @subcmd{MISSING} subcommand controls the handling of user-missing values.
223 When @subcmd{EXCLUDE}, the default, is set, user-missing values are not included
224 in frequency tables or statistics.  When @subcmd{INCLUDE} is set, user-missing
225 are included.  System-missing values are never included in statistics,
226 but are listed in frequency tables.
227
228 The available @subcmd{STATISTICS} are the same as available
229 in @cmd{DESCRIPTIVES} (@pxref{DESCRIPTIVES}), with the addition
230 of @subcmd{MEDIAN}, the data's median
231 value, and MODE, the mode.  (If there are multiple modes, the smallest
232 value is reported.)  By default, the mean, standard deviation of the
233 mean, minimum, and maximum are reported for each variable.
234
235 @cindex percentiles
236 @subcmd{PERCENTILES} causes the specified percentiles to be reported.
237 The percentiles should  be presented at a list of numbers between 0
238 and 100 inclusive.
239 The @subcmd{NTILES} subcommand causes the percentiles to be reported at the
240 boundaries of the data set divided into the specified number of ranges.
241 For instance, @subcmd{/NTILES=4} would cause quartiles to be reported.
242
243 @cindex histogram
244 The @subcmd{HISTOGRAM} subcommand causes the output to include a histogram for
245 each specified numeric variable.  The X axis by default ranges from
246 the minimum to the maximum value observed in the data, but the @subcmd{MINIMUM}
247 and @subcmd{MAXIMUM} keywords can set an explicit range.
248 @footnote{The number of
249 bins is chosen according to the Freedman-Diaconis rule:
250 @math{2 \times IQR(x)n^{-1/3}}, where @math{IQR(x)} is the interquartile range of @math{x}
251 and @math{n} is the number of samples.    Note that
252 @cmd{EXAMINE} uses a different algorithm to determine bin sizes.}
253 Histograms are not created for string variables.
254
255 Specify @subcmd{NORMAL} to superimpose a normal curve on the
256 histogram.
257
258 @cindex piechart
259 The @subcmd{PIECHART} subcommand adds a pie chart for each variable to the data.  Each
260 slice represents one value, with the size of the slice proportional to
261 the value's frequency.  By default, all non-missing values are given
262 slices.
263 The @subcmd{MINIMUM} and @subcmd{MAXIMUM} keywords can be used to limit the
264 displayed slices to a given range of values.
265 The keyword @subcmd{NOMISSING} causes missing values to be omitted from the
266 piechart.  This is the default.
267 If instead, @subcmd{MISSING} is specified, then the pie chart includes
268 a single slice representing all system missing and user-missing cases.
269
270 @cindex bar chart
271 The @subcmd{BARCHART} subcommand produces a bar chart for each variable.
272 The @subcmd{MINIMUM} and @subcmd{MAXIMUM} keywords can be used to omit
273 categories whose counts which lie outside the specified limits.
274 The @subcmd{FREQ} option (default) causes the ordinate to display the frequency
275 of each category, whereas the @subcmd{PERCENT} option displays relative
276 percentages.
277
278 The @subcmd{FREQ} and @subcmd{PERCENT} options on @subcmd{HISTOGRAM} and
279 @subcmd{PIECHART} are accepted but not currently honoured.
280
281 The @subcmd{ORDER} subcommand is accepted but ignored.
282
283 @subsection Frequencies Example
284
285 @ref{frequencies:ex} runs a frequency analysis on the @exvar{sex}
286 and @exvar{occupation} variables from the @file{personnel.sav} file.
287 This is useful to get an general idea of the way in which these nominal
288 variables are distributed.
289
290 @float Example, frequencies:ex
291 @psppsyntax {frequencies.sps}
292 @caption {Running frequencies on the @exvar{sex} and @exvar{occupation} variables}
293 @end float
294
295 If you are using the graphic user interface, the dialog box is set up such that
296 by default, several statistics are calculated.   Some are not particularly useful
297 for categorical variables, so you may want to disable those.
298
299 @float Screenshot, frequencies:scr
300 @psppimage {frequencies}
301 @caption {The frequencies dialog box with the @exvar{sex} and @exvar{occupation} variables selected}
302 @end float
303
304 From @ref{frequencies:res} it is evident that there are 33 males, 21 females and
305 2 persons for whom their sex has not been entered.
306
307 One can also see how many of each occupation there are in the data.
308 When dealing with string variables used as nominal values, running a frequency
309 analysis is useful to detect data input entries.  Notice that
310 one @exvar{occupation} value has been mistyped as ``Scrientist''.  This entry should
311 be corrected, or marked as missing before using the data.
312
313 @float Result, frequencies:res
314 @psppoutput {frequencies}
315 @caption {The relative frequencies of @exvar{sex} and @exvar{occupation}}
316 @end float
317
318 @node EXAMINE
319 @section EXAMINE
320
321 @vindex EXAMINE
322 @cindex Exploratory data analysis
323 @cindex normality, testing
324
325 @display
326 EXAMINE
327         VARIABLES= @var{var1} [@var{var2}] @dots{} [@var{varN}]
328            [BY @var{factor1} [BY @var{subfactor1}]
329              [ @var{factor2} [BY @var{subfactor2}]]
330              @dots{}
331              [ @var{factor3} [BY @var{subfactor3}]]
332             ]
333         /STATISTICS=@{DESCRIPTIVES, EXTREME[(@var{n})], ALL, NONE@}
334         /PLOT=@{BOXPLOT, NPPLOT, HISTOGRAM, SPREADLEVEL[(@var{t})], ALL, NONE@}
335         /CINTERVAL @var{p}
336         /COMPARE=@{GROUPS,VARIABLES@}
337         /ID=@var{identity_variable}
338         /@{TOTAL,NOTOTAL@}
339         /PERCENTILE=[@var{percentiles}]=@{HAVERAGE, WAVERAGE, ROUND, AEMPIRICAL, EMPIRICAL @}
340         /MISSING=@{LISTWISE, PAIRWISE@} [@{EXCLUDE, INCLUDE@}]
341                 [@{NOREPORT,REPORT@}]
342
343 @end display
344
345 The @cmd{EXAMINE} command is used to perform exploratory data analysis.
346 In particular, it is useful for testing how closely a distribution follows a
347 normal distribution, and for finding outliers and extreme values.
348
349 The @subcmd{VARIABLES} subcommand is mandatory.
350 It specifies the dependent variables and optionally variables to use as
351 factors for the analysis.
352 Variables listed before the first @subcmd{BY} keyword (if any) are the
353 dependent variables.
354 The dependent variables may optionally be followed by a list of
355 factors which tell @pspp{} how to break down the analysis for each
356 dependent variable.
357
358 Following the dependent variables, factors may be specified.
359 The factors (if desired) should be preceded by a single @subcmd{BY} keyword.
360 The format for each factor is
361 @display
362 @var{factorvar} [BY @var{subfactorvar}].
363 @end display
364 Each unique combination of the values of  @var{factorvar} and
365 @var{subfactorvar} divide the dataset into @dfn{cells}.
366 Statistics are calculated for each cell
367 and for the entire dataset (unless @subcmd{NOTOTAL} is given).
368
369 The @subcmd{STATISTICS} subcommand specifies which statistics to show.
370 @subcmd{DESCRIPTIVES} produces a table showing some parametric and
371 non-parametrics statistics.
372 @subcmd{EXTREME} produces a table showing the extremities of each cell.
373 A number in parentheses, @var{n} determines
374 how many upper and lower extremities to show.
375 The default number is 5.
376
377 The subcommands @subcmd{TOTAL} and @subcmd{NOTOTAL} are mutually exclusive.
378 If @subcmd{TOTAL} appears, then statistics for the entire dataset
379 as well as for each cell are produced.
380 If @subcmd{NOTOTAL} appears, then statistics are produced only for the cells
381 (unless no factor variables have been given).
382 These subcommands have no effect if there have  been no factor variables
383 specified.
384
385 @cindex boxplot
386 @cindex histogram
387 @cindex npplot
388 @cindex spreadlevel plot
389 The @subcmd{PLOT} subcommand specifies which plots are to be produced if any.
390 Available plots are @subcmd{HISTOGRAM}, @subcmd{NPPLOT},  @subcmd{BOXPLOT} and
391 @subcmd{SPREADLEVEL}.
392 The first three can be used to visualise how closely each cell conforms to a
393 normal distribution, whilst the spread vs.@: level plot can be useful to visualise
394 how the variance differs between factors.
395 Boxplots show you the outliers and extreme values.
396 @footnote{@subcmd{HISTOGRAM} uses Sturges' rule to determine the number of
397 bins, as approximately @math{1 + \log2(n)}, where @math{n} is the number of samples.
398 Note that @cmd{FREQUENCIES} uses a different algorithm to find the bin size.}
399
400 The @subcmd{SPREADLEVEL} plot displays the interquartile range versus the
401 median.  It takes an optional parameter @var{t}, which specifies how the data
402 should be transformed prior to plotting.
403 The given value @var{t} is a power to which the data are raised.  For example, if
404 @var{t} is given as 2, then the square of the data is used.
405 Zero, however is a special value.  If @var{t} is 0 or
406 is omitted, then data are transformed by taking its natural logarithm instead of
407 raising to the power of @var{t}.
408
409 @cindex Shapiro-Wilk
410 When one or more plots are requested, @subcmd{EXAMINE} also performs the
411 Shapiro-Wilk test for each category.
412 There are however a number of provisos:
413 @itemize
414 @item All weight values must be integer.
415 @item The cumulative weight value must be in the range [3, 5000]
416 @end itemize
417
418 The @subcmd{COMPARE} subcommand is only relevant if producing boxplots, and it is only
419 useful there is more than one dependent variable and at least one factor.
420 If
421 @subcmd{/COMPARE=GROUPS} is specified, then one plot per dependent variable is produced,
422 each of which contain boxplots for all the cells.
423 If @subcmd{/COMPARE=VARIABLES} is specified, then one plot per cell is produced,
424 each containing one boxplot per dependent variable.
425 If the @subcmd{/COMPARE} subcommand is omitted, then @pspp{} behaves as if
426 @subcmd{/COMPARE=GROUPS} were given.
427
428 The @subcmd{ID} subcommand is relevant only if @subcmd{/PLOT=BOXPLOT} or
429 @subcmd{/STATISTICS=EXTREME} has been given.
430 If given, it should provide the name of a variable which is to be used
431 to labels extreme values and outliers.
432 Numeric or string variables are permissible.
433 If the @subcmd{ID} subcommand is not given, then the case number is used for
434 labelling.
435
436 The @subcmd{CINTERVAL} subcommand specifies the confidence interval to use in
437 calculation of the descriptives command.  The default is 95%.
438
439 @cindex percentiles
440 The @subcmd{PERCENTILES} subcommand specifies which percentiles are to be calculated,
441 and which algorithm to use for calculating them.  The default is to
442 calculate the 5, 10, 25, 50, 75, 90, 95 percentiles using the
443 @subcmd{HAVERAGE} algorithm.
444
445 The @subcmd{TOTAL} and @subcmd{NOTOTAL} subcommands are mutually exclusive.  If @subcmd{NOTOTAL}
446 is given and factors have been specified in the @subcmd{VARIABLES} subcommand,
447 then statistics for the unfactored dependent variables are
448 produced in addition to the factored variables.  If there are no
449 factors specified then @subcmd{TOTAL} and @subcmd{NOTOTAL} have no effect.
450
451
452 The following example generates descriptive statistics and histograms for
453 two variables @var{score1} and @var{score2}.
454 Two factors are given, @i{viz}: @var{gender} and @var{gender} BY @var{culture}.
455 Therefore, the descriptives and histograms are generated for each
456 distinct  value
457 of @var{gender} @emph{and} for each distinct combination of the values
458 of @var{gender} and @var{race}.
459 Since the @subcmd{NOTOTAL} keyword is given, statistics and histograms for
460 @var{score1} and @var{score2} covering the  whole dataset are not produced.
461 @example
462 EXAMINE @var{score1} @var{score2} BY
463         @var{gender}
464         @var{gender} BY @var{culture}
465         /STATISTICS = DESCRIPTIVES
466         /PLOT = HISTOGRAM
467         /NOTOTAL.
468 @end example
469
470 Here is a second example showing how the @cmd{examine} command can be used to find extremities.
471 @example
472 EXAMINE @var{height} @var{weight} BY
473         @var{gender}
474         /STATISTICS = EXTREME (3)
475         /PLOT = BOXPLOT
476         /COMPARE = GROUPS
477         /ID = @var{name}.
478 @end example
479 In this example, we look at the height and weight of a sample of individuals and
480 how they differ between male and female.
481 A table showing the 3 largest and the 3 smallest values of @exvar{height} and
482 @exvar{weight} for each gender, and for the whole dataset as are shown.
483 In addition, the @subcmd{/PLOT} subcommand requests boxplots.
484 Because @subcmd{/COMPARE = GROUPS} was specified, boxplots for male and female are
485 shown in juxtaposed in the same graphic, allowing us to easily see the difference between
486 the genders.
487 Since the variable @var{name} was specified on the @subcmd{ID} subcommand,
488 values of the @var{name} variable are used to label the extreme values.
489
490 @strong{Warning!}
491 If you specify many dependent variables or factor variables
492 for which there are many distinct values, then @cmd{EXAMINE} will produce a very
493 large quantity of output.
494
495 @node GRAPH
496 @section GRAPH
497
498 @vindex GRAPH
499 @cindex Exploratory data analysis
500 @cindex normality, testing
501
502 @display
503 GRAPH
504         /HISTOGRAM [(NORMAL)]= @var{var}
505         /SCATTERPLOT [(BIVARIATE)] = @var{var1} WITH @var{var2} [BY @var{var3}]
506         /BAR = @{@var{summary-function}(@var{var1}) | @var{count-function}@} BY @var{var2} [BY @var{var3}]
507         [ /MISSING=@{LISTWISE, VARIABLE@} [@{EXCLUDE, INCLUDE@}] ]
508                 [@{NOREPORT,REPORT@}]
509
510 @end display
511
512 The @cmd{GRAPH} command produces graphical plots of data. Only one of the subcommands
513 @subcmd{HISTOGRAM}, @subcmd{BAR} or @subcmd{SCATTERPLOT} can be specified, @i{i.e.} only one plot
514 can be produced per call of @cmd{GRAPH}. The @subcmd{MISSING} is optional.
515
516 @menu
517 * SCATTERPLOT::             Cartesian Plots
518 * HISTOGRAM::               Histograms
519 * BAR CHART::               Bar Charts
520 @end menu
521
522 @node SCATTERPLOT
523 @subsection Scatterplot
524 @cindex scatterplot
525
526 The subcommand @subcmd{SCATTERPLOT} produces an xy plot of the
527 data.
528 @cmd{GRAPH} uses the third variable @var{var3}, if specified, to determine
529 the colours and/or markers for the plot.
530 The following is an example for producing a scatterplot.
531
532 @example
533 GRAPH
534         /SCATTERPLOT = @var{height} WITH @var{weight} BY @var{gender}.
535 @end example
536
537 This example produces a scatterplot where @var{height} is plotted versus @var{weight}. Depending
538 on the value of the @var{gender} variable, the colour of the datapoint is different. With
539 this plot it is possible to analyze gender differences for @var{height} versus @var{weight} relation.
540
541 @node HISTOGRAM
542 @subsection Histogram
543 @cindex histogram
544
545 The subcommand @subcmd{HISTOGRAM} produces a histogram. Only one variable is allowed for
546 the histogram plot.
547 The keyword @subcmd{NORMAL} may be specified in parentheses, to indicate that the ideal normal curve
548 should be superimposed over the histogram.
549 For an alternative method to produce histograms @pxref{EXAMINE}. The
550 following example produces a histogram plot for the variable @var{weight}.
551
552 @example
553 GRAPH
554         /HISTOGRAM = @var{weight}.
555 @end example
556
557 @node BAR CHART
558 @subsection Bar Chart
559 @cindex bar chart
560
561 The subcommand @subcmd{BAR} produces a bar chart.
562 This subcommand requires that a @var{count-function} be specified (with no arguments) or a @var{summary-function} with a variable @var{var1} in parentheses.
563 Following the summary or count function, the keyword @subcmd{BY} should be specified and then a catagorical variable, @var{var2}.
564 The values of the variable @var{var2} determine the labels of the bars to be plotted.
565 Optionally a second categorical variable @var{var3} may be specified in which case a clustered (grouped) bar chart is produced.
566
567 Valid count functions are
568 @table @subcmd
569 @item COUNT
570 The weighted counts of the cases in each category.
571 @item PCT
572 The weighted counts of the cases in each category expressed as a percentage of the total weights of the cases.
573 @item CUFREQ
574 The cumulative weighted counts of the cases in each category.
575 @item CUPCT
576 The cumulative weighted counts of the cases in each category expressed as a percentage of the total weights of the cases.
577 @end table
578
579 The summary function is applied to @var{var1} across all cases in each category.
580 The recognised summary functions are:
581 @table @subcmd
582 @item SUM
583 The sum.
584 @item MEAN
585 The arithmetic mean.
586 @item MAXIMUM
587 The maximum value.
588 @item MINIMUM
589 The minimum value.
590 @end table
591
592 The following examples assume a dataset which is the results of a survey.
593 Each respondent has indicated annual income, their sex and city of residence.
594 One could create a bar chart showing how the mean income varies between of residents of different cities, thus:
595 @example
596 GRAPH  /BAR  = MEAN(@var{income}) BY @var{city}.
597 @end example
598
599 This can be extended to also indicate how income in each city differs between the sexes.
600 @example
601 GRAPH  /BAR  = MEAN(@var{income}) BY @var{city} BY @var{sex}.
602 @end example
603
604 One might also want to see how many respondents there are from each city.  This can be achieved as follows:
605 @example
606 GRAPH  /BAR  = COUNT BY @var{city}.
607 @end example
608
609 Bar charts can also be produced using the @ref{FREQUENCIES} and @ref{CROSSTABS} commands.
610
611 @node CORRELATIONS
612 @section CORRELATIONS
613
614 @vindex CORRELATIONS
615 @display
616 CORRELATIONS
617      /VARIABLES = @var{var_list} [ WITH @var{var_list} ]
618      [
619       .
620       .
621       .
622       /VARIABLES = @var{var_list} [ WITH @var{var_list} ]
623       /VARIABLES = @var{var_list} [ WITH @var{var_list} ]
624      ]
625
626      [ /PRINT=@{TWOTAIL, ONETAIL@} @{SIG, NOSIG@} ]
627      [ /STATISTICS=DESCRIPTIVES XPROD ALL]
628      [ /MISSING=@{PAIRWISE, LISTWISE@} @{INCLUDE, EXCLUDE@} ]
629 @end display
630
631 @cindex correlation
632 The @cmd{CORRELATIONS} procedure produces tables of the Pearson correlation coefficient
633 for a set of variables.  The significance of the coefficients are also given.
634
635 At least one @subcmd{VARIABLES} subcommand is required. If you specify the @subcmd{WITH}
636 keyword, then a non-square correlation table is produced.
637 The variables preceding @subcmd{WITH}, are used as the rows of the table,
638 and the variables following @subcmd{WITH} are used as the columns of the table.
639 If no @subcmd{WITH} subcommand is specified, then @cmd{CORRELATIONS} produces a
640 square, symmetrical table using all variables.
641
642 The @cmd{MISSING} subcommand determines the handling of missing variables.
643 If @subcmd{INCLUDE} is set, then user-missing values are included in the
644 calculations, but system-missing values are not.
645 If @subcmd{EXCLUDE} is set, which is the default, user-missing
646 values are excluded as well as system-missing values.
647
648 If @subcmd{LISTWISE} is set, then the entire case is excluded from analysis
649 whenever any variable  specified in any @cmd{/VARIABLES} subcommand
650 contains a missing value.
651 If @subcmd{PAIRWISE} is set, then a case is considered missing only if either of the
652 values  for the particular coefficient are missing.
653 The default is @subcmd{PAIRWISE}.
654
655 The @subcmd{PRINT} subcommand is used to control how the reported significance values are printed.
656 If the @subcmd{TWOTAIL} option is used, then a two-tailed test of significance is
657 printed.  If the @subcmd{ONETAIL} option is given, then a one-tailed test is used.
658 The default is @subcmd{TWOTAIL}.
659
660 If the @subcmd{NOSIG} option is specified, then correlation coefficients with significance less than
661 0.05 are highlighted.
662 If @subcmd{SIG} is specified, then no highlighting is performed.  This is the default.
663
664 @cindex covariance
665 The @subcmd{STATISTICS} subcommand requests additional statistics to be displayed.  The keyword
666 @subcmd{DESCRIPTIVES} requests that the mean, number of non-missing cases, and the non-biased
667 estimator of the standard deviation are displayed.
668 These statistics are displayed in a separated table, for all the variables listed
669 in any @subcmd{/VARIABLES} subcommand.
670 The @subcmd{XPROD} keyword requests cross-product deviations and covariance estimators to
671 be displayed for each pair of variables.
672 The keyword @subcmd{ALL} is the union of @subcmd{DESCRIPTIVES} and @subcmd{XPROD}.
673
674 @node CROSSTABS
675 @section CROSSTABS
676
677 @vindex CROSSTABS
678 @display
679 CROSSTABS
680         /TABLES=@var{var_list} BY @var{var_list} [BY @var{var_list}]@dots{}
681         /MISSING=@{TABLE,INCLUDE,REPORT@}
682         /FORMAT=@{TABLES,NOTABLES@}
683                 @{AVALUE,DVALUE@}
684         /CELLS=@{COUNT,ROW,COLUMN,TOTAL,EXPECTED,RESIDUAL,SRESIDUAL,
685                 ASRESIDUAL,ALL,NONE@}
686         /COUNT=@{ASIS,CASE,CELL@}
687                @{ROUND,TRUNCATE@}
688         /STATISTICS=@{CHISQ,PHI,CC,LAMBDA,UC,BTAU,CTAU,RISK,GAMMA,D,
689                      KAPPA,ETA,CORR,ALL,NONE@}
690         /BARCHART
691
692 (Integer mode.)
693         /VARIABLES=@var{var_list} (@var{low},@var{high})@dots{}
694 @end display
695
696 The @cmd{CROSSTABS} procedure displays crosstabulation
697 tables requested by the user.  It can calculate several statistics for
698 each cell in the crosstabulation tables.  In addition, a number of
699 statistics can be calculated for each table itself.
700
701 The @subcmd{TABLES} subcommand is used to specify the tables to be reported.  Any
702 number of dimensions is permitted, and any number of variables per
703 dimension is allowed.  The @subcmd{TABLES} subcommand may be repeated as many
704 times as needed.  This is the only required subcommand in @dfn{general
705 mode}.
706
707 Occasionally, one may want to invoke a special mode called @dfn{integer
708 mode}.  Normally, in general mode, @pspp{} automatically determines
709 what values occur in the data.  In integer mode, the user specifies the
710 range of values that the data assumes.  To invoke this mode, specify the
711 @subcmd{VARIABLES} subcommand, giving a range of data values in parentheses for
712 each variable to be used on the @subcmd{TABLES} subcommand.  Data values inside
713 the range are truncated to the nearest integer, then assigned to that
714 value.  If values occur outside this range, they are discarded.  When it
715 is present, the @subcmd{VARIABLES} subcommand must precede the @subcmd{TABLES}
716 subcommand.
717
718 In general mode, numeric and string variables may be specified on
719 TABLES.  In integer mode, only numeric variables are allowed.
720
721 The @subcmd{MISSING} subcommand determines the handling of user-missing values.
722 When set to @subcmd{TABLE}, the default, missing values are dropped on a table by
723 table basis.  When set to @subcmd{INCLUDE}, user-missing values are included in
724 tables and statistics.  When set to @subcmd{REPORT}, which is allowed only in
725 integer mode, user-missing values are included in tables but marked with
726 a footnote and excluded from statistical calculations.
727
728 The @subcmd{FORMAT} subcommand controls the characteristics of the
729 crosstabulation tables to be displayed.  It has a number of possible
730 settings:
731
732 @itemize @w{}
733 @item
734 @subcmd{TABLES}, the default, causes crosstabulation tables to be output.
735 @subcmd{NOTABLES}, which is equivalent to @code{CELLS=NONE}, suppresses them.
736
737 @item
738 @subcmd{AVALUE}, the default, causes values to be sorted in ascending order.
739 @subcmd{DVALUE} asserts a descending sort order.
740 @end itemize
741
742 The @subcmd{CELLS} subcommand controls the contents of each cell in the displayed
743 crosstabulation table.  The possible settings are:
744
745 @table @asis
746 @item COUNT
747 Frequency count.
748 @item ROW
749 Row percent.
750 @item COLUMN
751 Column percent.
752 @item TOTAL
753 Table percent.
754 @item EXPECTED
755 Expected value.
756 @item RESIDUAL
757 Residual.
758 @item SRESIDUAL
759 Standardized residual.
760 @item ASRESIDUAL
761 Adjusted standardized residual.
762 @item ALL
763 All of the above.
764 @item NONE
765 Suppress cells entirely.
766 @end table
767
768 @samp{/CELLS} without any settings specified requests @subcmd{COUNT}, @subcmd{ROW},
769 @subcmd{COLUMN}, and @subcmd{TOTAL}.
770 If @subcmd{CELLS} is not specified at all then only @subcmd{COUNT}
771 is selected.
772
773 By default, crosstabulation and statistics use raw case weights,
774 without rounding.  Use the @subcmd{/COUNT} subcommand to perform
775 rounding: CASE rounds the weights of individual weights as cases are
776 read, CELL rounds the weights of cells within each crosstabulation
777 table after it has been constructed, and ASIS explicitly specifies the
778 default non-rounding behavior.  When rounding is requested, ROUND, the
779 default, rounds to the nearest integer and TRUNCATE rounds toward
780 zero.
781
782 The @subcmd{STATISTICS} subcommand selects statistics for computation:
783
784 @table @asis
785 @item CHISQ
786 @cindex chi-square
787
788 Pearson chi-square, likelihood ratio, Fisher's exact test, continuity
789 correction, linear-by-linear association.
790 @item PHI
791 Phi.
792 @item CC
793 Contingency coefficient.
794 @item LAMBDA
795 Lambda.
796 @item UC
797 Uncertainty coefficient.
798 @item BTAU
799 Tau-b.
800 @item CTAU
801 Tau-c.
802 @item RISK
803 Risk estimate.
804 @item GAMMA
805 Gamma.
806 @item D
807 Somers' D.
808 @item KAPPA
809 Cohen's Kappa.
810 @item ETA
811 Eta.
812 @item CORR
813 Spearman correlation, Pearson's r.
814 @item ALL
815 All of the above.
816 @item NONE
817 No statistics.
818 @end table
819
820 Selected statistics are only calculated when appropriate for the
821 statistic.  Certain statistics require tables of a particular size, and
822 some statistics are calculated only in integer mode.
823
824 @samp{/STATISTICS} without any settings selects CHISQ.  If the
825 @subcmd{STATISTICS} subcommand is not given, no statistics are calculated.
826
827 @cindex bar chart
828 The @samp{/BARCHART} subcommand produces a clustered bar chart for the first two
829 variables on each table.
830 If a table has more than two variables, the counts for the third and subsequent levels
831 are aggregated and the chart is produced as if there were only two variables.
832
833
834 @strong{Please note:} Currently the implementation of @cmd{CROSSTABS} has the
835 following limitations:
836
837 @itemize @bullet
838 @item
839 Significance of some symmetric and directional measures is not calculated.
840 @item
841 Asymptotic standard error is not calculated for
842 Goodman and Kruskal's tau or symmetric Somers' d.
843 @item
844 Approximate T is not calculated for symmetric uncertainty coefficient.
845 @end itemize
846
847 Fixes for any of these deficiencies would be welcomed.
848
849 @subsection Crosstabs Example
850
851 @cindex chi-square test of independence
852
853 A researcher wishes to know if, in an industry, a person's sex is related to
854 the person's occupation.  To investigate this, she has determined that the
855 @file{personnel.sav} is a representative, randomly selected sample of persons.
856 The researcher's null hypothesis is that a person's sex has no relation to a
857 person's occupation. She uses a chi-squared test of independence to investigate
858 the hypothesis.
859
860 @float Example, crosstabs:ex
861 @psppsyntax {crosstabs.sps}
862 @caption {Running crosstabs on the @exvar{sex} and @exvar{occupation} variables}
863 @end float
864
865 The syntax in @ref{crosstabs:ex} conducts a chi-squared test of independence.
866 The line @code{/tables = occupation by sex} indicates that @exvar{occupation}
867 and @exvar{sex} are the variables to be tabulated.  To do this using the @gui{}
868 you must place these variable names respectively in the @samp{Row} and
869 @samp{Column} fields as shown in @ref{crosstabs:scr}.
870
871 @float Screenshot, crosstabs:scr
872 @psppimage {crosstabs}
873 @caption {The Crosstabs dialog box with the @exvar{sex} and @exvar{occupation} variables selected}
874 @end float
875
876 Similarly, the @samp{Cells} button shows a dialog box to select the @code{count}
877 and @code{expected} options.  All other cell options can be deselected for this
878 test.
879
880 You would use the @samp{Format} and @samp{Statistics}  buttons to select options
881 for the @subcmd{FORMAT} and @subcmd{STATISTICS} subcommands.  In this example,
882 the @samp{Statistics} requires only the @samp{Chisq} option to be checked.  All
883 other options should be unchecked.  No special settings are required from the
884 @samp{Format} dialog.
885
886 As shown in @ref{crosstabs:res} @cmd{CROSSTABS} generates a contingency table
887 containing the observed count and the expected count of each sex and each
888 occupation.  The expected count is the count which would be observed if the
889 null hypothesis were true.
890
891 The significance of the Pearson Chi-Square value is very much larger than the
892 normally accepted value of 0.05 and so one cannot reject the null hypothesis.
893 Thus the researcher must conclude that a person's sex has no relation to the
894 person's occupation.
895
896 @float Results, crosstabs:res
897 @psppoutput {crosstabs}
898 @caption {The results of a test of independence between @exvar{sex} and @exvar{occupation}}
899 @end float
900
901 @node CTABLES
902 @section CTABLES
903
904 @vindex CTABLES
905 @cindex custom tables
906 @cindex tables, custom
907
908 @code{CTABLES} has the following overall syntax.  At least one
909 @code{TABLE} subcommand is required:
910
911 @display
912 @t{CTABLES}
913   @dots{}@i{global subcommands}@dots{}
914   [@t{/TABLE} @i{rows} @t{BY} @i{columns} @t{BY} @i{layers}
915    @dots{}@i{per-table subcommands}@dots{}]@dots{}
916 @end display
917
918 The following subcommands precede the first @code{TABLE} subcommand
919 and apply to all of the output tables.  All of these subcommands are
920 optional:
921
922 @display
923 @t{/FORMAT}
924     [@t{MINCOLWIDTH=}@{@t{DEFAULT} @math{|} @i{width}@}]
925     [@t{MAXCOLWIDTH=}@{@t{DEFAULT} @math{|} @i{width}@}]
926     [@t{UNITS=}@{@t{POINTS} @math{|} @t{INCHES} @math{|} @t{CM}@}]
927     [@t{EMPTY=}@{@t{ZERO} @math{|} @t{BLANK} @math{|} @i{string}@}]
928     [@t{MISSING=}@i{string}]
929 @t{/VLABELS}
930     @t{VARIABLES=}@i{variables}
931     @t{DISPLAY}=@{@t{DEFAULT} @math{|} @t{NAME} @math{|} @t{LABEL} @math{|} @t{BOTH} @math{|} @t{NONE}@}
932 @t{/MRSETS COUNTDUPLICATES=}@{@t{YES} @math{|} @t{NO}@}
933 @t{/SMISSING} @{@t{VARIABLE} @math{|} @t{LISTWISE}@}
934 @t{/PCOMPUTE} @t{&}@i{category}@t{=EXPR(}@i{expression}@t{)}
935 @t{/PPROPERTIES} @t{&}@i{category}@dots{}
936     [@t{LABEL=}@i{string}]
937     [@t{FORMAT=}[@i{summary} @i{format}]@dots{}]
938     [@t{HIDESOURCECATS=}@{@t{NO} @math{|} @t{YES}@}
939 @t{/WEIGHT VARIABLE=}@i{variable}
940 @t{/HIDESMALLCOUNTS COUNT=@i{count}}
941 @end display
942
943 The following subcommands follow @code{TABLE} and apply only to the
944 previous @code{TABLE}.  All of these subcommands are optional:
945
946 @display
947 @t{/SLABELS}
948     [@t{POSITION=}@{@t{COLUMN} @math{|} @t{ROW} @math{|} @t{LAYER}@}]
949     [@t{VISIBLE=}@{@t{YES} @math{|} @t{NO}@}]
950 @t{/CLABELS} @{@t{AUTO} @math{|} @{@t{ROWLABELS}@math{|}@t{COLLABELS}@}@t{=}@{@t{OPPOSITE}@math{|}@t{LAYER}@}@}
951 @t{/CRITERIA CILEVEL=}@i{percentage}
952 @t{/CATEGORIES} @t{VARIABLES=}@i{variables}
953     @{@t{[}@i{value}@t{,} @i{value}@dots{}@t{]}
954    @math{|} [@t{ORDER=}@{@t{A} @math{|} @t{D}@}]
955      [@t{KEY=}@{@t{VALUE} @math{|} @t{LABEL} @math{|} @i{summary}@t{(}@i{variable}@t{)}@}]
956      [@t{MISSING=}@{@t{EXCLUDE} @math{|} @t{INCLUDE}@}]@}
957     [@t{TOTAL=}@{@t{NO} @math{|} @t{YES}@} [@t{LABEL=}@i{string}] [@t{POSITION=}@{@t{AFTER} @math{|} @t{BEFORE}@}]]
958     [@t{EMPTY=}@{@t{INCLUDE} @math{|} @t{EXCLUDE}@}]
959 @t{/TITLES}
960     [@t{TITLE=}@i{string}@dots{}]
961     [@t{CAPTION=}@i{string}@dots{}]
962     [@t{CORNER=}@i{string}@dots{}]
963 @t{/SIGTEST TYPE=CHISQUARE}
964     [@t{ALPHA=}@i{siglevel}]
965     [@t{INCLUDEMRSETS=}@{@t{YES} @math{|} @t{NO}@}]
966     [@t{CATEGORIES=}@{@t{ALLVISIBLE} @math{|} @t{SUBTOTALS}@}]
967 @t{/COMPARETEST TYPE=}@{@t{PROP} @math{|} @t{MEAN}@}
968     [@t{ALPHA=}@i{value}[@t{,} @i{value}]]
969     [@t{ADJUST=}@{@t{BONFERRONI} @math{|} @t{BH} @math{|} @t{NONE}@}]
970     [@t{INCLUDEMRSETS=}@{@t{YES} @math{|} @t{NO}@}]
971     [@t{MEANSVARIANCE=}@{@t{ALLCATS} @math{|} @t{TESTEDCATS}@}]
972     [@t{CATEGORIES=}@{@t{ALLVISIBLE} @math{|} @t{SUBTOTALS}@}]
973     [@t{MERGE=}@{@t{NO} @math{|} @t{YES}@}]
974     [@t{STYLE=}@{@t{APA} @math{|} @t{SIMPLE}@}]
975     [@t{SHOWSIG=}@{@t{NO} @math{|} @t{YES}@}]
976 @end display
977
978 @node FACTOR
979 @section FACTOR
980
981 @vindex FACTOR
982 @cindex factor analysis
983 @cindex principal components analysis
984 @cindex principal axis factoring
985 @cindex data reduction
986
987 @display
988 FACTOR  @{
989          VARIABLES=@var{var_list},
990          MATRIX IN (@{CORR,COV@}=@{*,@var{file_spec}@})
991         @}
992
993         [ /METHOD = @{CORRELATION, COVARIANCE@} ]
994
995         [ /ANALYSIS=@var{var_list} ]
996
997         [ /EXTRACTION=@{PC, PAF@}]
998
999         [ /ROTATION=@{VARIMAX, EQUAMAX, QUARTIMAX, PROMAX[(@var{k})], NOROTATE@}]
1000
1001         [ /PRINT=[INITIAL] [EXTRACTION] [ROTATION] [UNIVARIATE] [CORRELATION] [COVARIANCE] [DET] [KMO] [AIC] [SIG] [ALL] [DEFAULT] ]
1002
1003         [ /PLOT=[EIGEN] ]
1004
1005         [ /FORMAT=[SORT] [BLANK(@var{n})] [DEFAULT] ]
1006
1007         [ /CRITERIA=[FACTORS(@var{n})] [MINEIGEN(@var{l})] [ITERATE(@var{m})] [ECONVERGE (@var{delta})] [DEFAULT] ]
1008
1009         [ /MISSING=[@{LISTWISE, PAIRWISE@}] [@{INCLUDE, EXCLUDE@}] ]
1010 @end display
1011
1012 The @cmd{FACTOR} command performs Factor Analysis or Principal Axis Factoring on a dataset.  It may be used to find
1013 common factors in the data or for data reduction purposes.
1014
1015 The @subcmd{VARIABLES} subcommand is required (unless the @subcmd{MATRIX IN}
1016 subcommand is used).
1017 It lists the variables which are to partake in the analysis.  (The @subcmd{ANALYSIS}
1018 subcommand may optionally further limit the variables that
1019 participate; it is useful primarily in conjunction with @subcmd{MATRIX IN}.)
1020
1021 If @subcmd{MATRIX IN} instead of @subcmd{VARIABLES} is specified, then the analysis
1022 is performed on a pre-prepared correlation or covariance matrix file instead of on
1023 individual data cases.  Typically the matrix file will have been generated by
1024 @cmd{MATRIX DATA} (@pxref{MATRIX DATA}) or provided by a third party.
1025 If specified, @subcmd{MATRIX IN} must be followed by @samp{COV} or @samp{CORR},
1026 then by @samp{=} and @var{file_spec} all in parentheses.
1027 @var{file_spec} may either be an asterisk, which indicates the currently loaded
1028 dataset, or it may be a file name to be loaded. @xref{MATRIX DATA}, for the expected
1029 format of the file.
1030
1031 The @subcmd{/EXTRACTION} subcommand is used to specify the way in which factors
1032 (components) are extracted from the data.
1033 If @subcmd{PC} is specified, then Principal Components Analysis is used.
1034 If @subcmd{PAF} is specified, then Principal Axis Factoring is
1035 used. By default Principal Components Analysis is used.
1036
1037 The @subcmd{/ROTATION} subcommand is used to specify the method by which the
1038 extracted solution is rotated.  Three orthogonal rotation methods are available:
1039 @subcmd{VARIMAX} (which is the default), @subcmd{EQUAMAX}, and @subcmd{QUARTIMAX}.
1040 There is one oblique rotation method, @i{viz}: @subcmd{PROMAX}.
1041 Optionally you may enter the power of the promax rotation @var{k}, which must be enclosed in parentheses.
1042 The default value of @var{k} is 5.
1043 If you don't want any rotation to be performed, the word @subcmd{NOROTATE}
1044 prevents the command from performing any rotation on the data.
1045
1046 The @subcmd{/METHOD} subcommand should be used to determine whether the
1047 covariance matrix or the correlation matrix of the data is
1048 to be analysed.  By default, the correlation matrix is analysed.
1049
1050 The @subcmd{/PRINT} subcommand may be used to select which features of the analysis are reported:
1051
1052 @itemize
1053 @item @subcmd{UNIVARIATE}
1054       A table of mean values, standard deviations and total weights are printed.
1055 @item @subcmd{INITIAL}
1056       Initial communalities and eigenvalues are printed.
1057 @item @subcmd{EXTRACTION}
1058       Extracted communalities and eigenvalues are printed.
1059 @item @subcmd{ROTATION}
1060       Rotated communalities and eigenvalues are printed.
1061 @item @subcmd{CORRELATION}
1062       The correlation matrix is printed.
1063 @item @subcmd{COVARIANCE}
1064       The covariance matrix is printed.
1065 @item @subcmd{DET}
1066       The determinant of the correlation or covariance matrix is printed.
1067 @item @subcmd{AIC}
1068       The anti-image covariance and anti-image correlation matrices are printed.
1069 @item @subcmd{KMO}
1070       The Kaiser-Meyer-Olkin measure of sampling adequacy and the Bartlett test of sphericity is printed.
1071 @item @subcmd{SIG}
1072       The significance of the elements of correlation matrix is printed.
1073 @item @subcmd{ALL}
1074       All of the above are printed.
1075 @item @subcmd{DEFAULT}
1076       Identical to @subcmd{INITIAL} and @subcmd{EXTRACTION}.
1077 @end itemize
1078
1079 If @subcmd{/PLOT=EIGEN} is given, then a ``Scree'' plot of the eigenvalues is
1080 printed.  This can be useful for visualizing the factors and deciding
1081 which factors (components) should be retained.
1082
1083 The @subcmd{/FORMAT} subcommand determined how data are to be
1084 displayed in loading matrices.  If @subcmd{SORT} is specified, then
1085 the variables are sorted in descending order of significance.  If
1086 @subcmd{BLANK(@var{n})} is specified, then coefficients whose absolute
1087 value is less than @var{n} are not printed.  If the keyword
1088 @subcmd{DEFAULT} is specified, or if no @subcmd{/FORMAT} subcommand is
1089 specified, then no sorting is performed, and all coefficients are printed.
1090
1091 You can use the @subcmd{/CRITERIA} subcommand to specify how the number of
1092 extracted factors (components) are chosen.  If @subcmd{FACTORS(@var{n})} is
1093 specified, where @var{n} is an integer, then @var{n} factors are
1094 extracted.  Otherwise, the @subcmd{MINEIGEN} setting is used.
1095 @subcmd{MINEIGEN(@var{l})} requests that all factors whose eigenvalues
1096 are greater than or equal to @var{l} are extracted. The default value
1097 of @var{l} is 1. The @subcmd{ECONVERGE} setting has effect only when
1098 using iterative algorithms for factor extraction (such as Principal Axis
1099 Factoring).  @subcmd{ECONVERGE(@var{delta})} specifies that
1100 iteration should cease when the maximum absolute value of the
1101 communality estimate between one iteration and the previous is less
1102 than @var{delta}. The default value of @var{delta} is 0.001.
1103
1104 The @subcmd{ITERATE(@var{m})} may appear any number of times and is
1105 used for two different purposes. It is used to set the maximum number
1106 of iterations (@var{m}) for convergence and also to set the maximum
1107 number of iterations for rotation.
1108 Whether it affects convergence or rotation depends upon which
1109 subcommand follows the @subcmd{ITERATE} subcommand.
1110 If @subcmd{EXTRACTION} follows, it affects convergence.
1111 If @subcmd{ROTATION} follows, it affects rotation.
1112 If neither @subcmd{ROTATION} nor @subcmd{EXTRACTION} follow a
1113 @subcmd{ITERATE} subcommand, then the entire subcommand is ignored.
1114 The default value of @var{m} is 25.
1115
1116 The @cmd{MISSING} subcommand determines the handling of missing
1117 variables.  If @subcmd{INCLUDE} is set, then user-missing values are
1118 included in the calculations, but system-missing values are not.
1119 If @subcmd{EXCLUDE} is set, which is the default, user-missing
1120 values are excluded as well as system-missing values.  This is the
1121 default. If @subcmd{LISTWISE} is set, then the entire case is excluded
1122 from analysis whenever any variable  specified in the @cmd{VARIABLES}
1123 subcommand contains a missing value.
1124
1125 If @subcmd{PAIRWISE} is set, then a case is considered missing only if
1126 either of the values  for the particular coefficient are missing.
1127 The default is @subcmd{LISTWISE}.
1128
1129 @node GLM
1130 @section GLM
1131
1132 @vindex GLM
1133 @cindex univariate analysis of variance
1134 @cindex fixed effects
1135 @cindex factorial anova
1136 @cindex analysis of variance
1137 @cindex ANOVA
1138
1139
1140 @display
1141 GLM @var{dependent_vars} BY @var{fixed_factors}
1142      [/METHOD = SSTYPE(@var{type})]
1143      [/DESIGN = @var{interaction_0} [@var{interaction_1} [... @var{interaction_n}]]]
1144      [/INTERCEPT = @{INCLUDE|EXCLUDE@}]
1145      [/MISSING = @{INCLUDE|EXCLUDE@}]
1146 @end display
1147
1148 The @cmd{GLM} procedure can be used for fixed effects factorial Anova.
1149
1150 The @var{dependent_vars} are the variables to be analysed.
1151 You may analyse several variables in the same command in which case they should all
1152 appear before the @code{BY} keyword.
1153
1154 The @var{fixed_factors} list must be one or more categorical variables.  Normally it
1155 does not make sense to enter a scalar variable in the @var{fixed_factors} and doing
1156 so may cause @pspp{} to do a lot of unnecessary processing.
1157
1158 The @subcmd{METHOD} subcommand is used to change the method for producing the sums of
1159 squares.  Available values of @var{type} are 1, 2 and 3.  The default is type 3.
1160
1161 You may specify a custom design using the @subcmd{DESIGN} subcommand.
1162 The design comprises a list of interactions where each interaction is a
1163 list of variables separated by a @samp{*}.  For example the command
1164 @display
1165 GLM subject BY sex age_group race
1166     /DESIGN = age_group sex group age_group*sex age_group*race
1167 @end display
1168 @noindent specifies the model @math{subject = age_group + sex + race + age_group*sex + age_group*race}.
1169 If no @subcmd{DESIGN} subcommand is specified, then the default is all possible combinations
1170 of the fixed factors.  That is to say
1171 @display
1172 GLM subject BY sex age_group race
1173 @end display
1174 implies the model
1175 @math{subject = age_group + sex + race + age_group*sex + age_group*race + sex*race + age_group*sex*race}.
1176
1177
1178 The @subcmd{MISSING} subcommand determines the handling of missing
1179 variables.
1180 If @subcmd{INCLUDE} is set then, for the purposes of GLM analysis,
1181 only system-missing values are considered
1182 to be missing; user-missing values are not regarded as missing.
1183 If @subcmd{EXCLUDE} is set, which is the default, then user-missing
1184 values are considered to be missing as well as system-missing values.
1185 A case for which any dependent variable or any factor
1186 variable has a missing value is excluded from the analysis.
1187
1188 @node LOGISTIC REGRESSION
1189 @section LOGISTIC REGRESSION
1190
1191 @vindex LOGISTIC REGRESSION
1192 @cindex logistic regression
1193 @cindex bivariate logistic regression
1194
1195 @display
1196 LOGISTIC REGRESSION [VARIABLES =] @var{dependent_var} WITH @var{predictors}
1197
1198      [/CATEGORICAL = @var{categorical_predictors}]
1199
1200      [@{/NOCONST | /ORIGIN | /NOORIGIN @}]
1201
1202      [/PRINT = [SUMMARY] [DEFAULT] [CI(@var{confidence})] [ALL]]
1203
1204      [/CRITERIA = [BCON(@var{min_delta})] [ITERATE(@var{max_interations})]
1205                   [LCON(@var{min_likelihood_delta})] [EPS(@var{min_epsilon})]
1206                   [CUT(@var{cut_point})]]
1207
1208      [/MISSING = @{INCLUDE|EXCLUDE@}]
1209 @end display
1210
1211 Bivariate Logistic Regression is used when you want to explain a dichotomous dependent
1212 variable in terms of one or more predictor variables.
1213
1214 The minimum command is
1215 @example
1216 LOGISTIC REGRESSION @var{y} WITH @var{x1} @var{x2} @dots{} @var{xn}.
1217 @end example
1218 Here, @var{y} is the dependent variable, which must be dichotomous and @var{x1} @dots{} @var{xn}
1219 are the predictor variables whose coefficients the procedure estimates.
1220
1221 By default, a constant term is included in the model.
1222 Hence, the full model is
1223 @math{
1224 {\bf y}
1225 = b_0 + b_1 {\bf x_1}
1226 + b_2 {\bf x_2}
1227 + \dots
1228 + b_n {\bf x_n}
1229 }
1230
1231 Predictor variables which are categorical in nature should be listed on the @subcmd{/CATEGORICAL} subcommand.
1232 Simple variables as well as interactions between variables may be listed here.
1233
1234 If you want a model without the constant term @math{b_0}, use the keyword @subcmd{/ORIGIN}.
1235 @subcmd{/NOCONST} is a synonym for @subcmd{/ORIGIN}.
1236
1237 An iterative Newton-Raphson procedure is used to fit the model.
1238 The @subcmd{/CRITERIA} subcommand is used to specify the stopping criteria of the procedure,
1239 and other parameters.
1240 The value of @var{cut_point} is used in the classification table.  It is the
1241 threshold above which predicted values are considered to be 1.  Values
1242 of @var{cut_point} must lie in the range [0,1].
1243 During iterations, if any one of the stopping criteria are satisfied, the procedure is
1244 considered complete.
1245 The stopping criteria are:
1246 @itemize
1247 @item The number of iterations exceeds @var{max_iterations}.
1248       The default value of @var{max_iterations} is 20.
1249 @item The change in the all coefficient estimates are less than @var{min_delta}.
1250 The default value of @var{min_delta} is 0.001.
1251 @item The magnitude of change in the likelihood estimate is less than @var{min_likelihood_delta}.
1252 The default value of @var{min_delta} is zero.
1253 This means that this criterion is disabled.
1254 @item The differential of the estimated probability for all cases is less than @var{min_epsilon}.
1255 In other words, the probabilities are close to zero or one.
1256 The default value of @var{min_epsilon} is 0.00000001.
1257 @end itemize
1258
1259
1260 The @subcmd{PRINT} subcommand controls the display of optional statistics.
1261 Currently there is one such option, @subcmd{CI}, which indicates that the
1262 confidence interval of the odds ratio should be displayed as well as its value.
1263 @subcmd{CI} should be followed by an integer in parentheses, to indicate the
1264 confidence level of the desired confidence interval.
1265
1266 The @subcmd{MISSING} subcommand determines the handling of missing
1267 variables.
1268 If @subcmd{INCLUDE} is set, then user-missing values are included in the
1269 calculations, but system-missing values are not.
1270 If @subcmd{EXCLUDE} is set, which is the default, user-missing
1271 values are excluded as well as system-missing values.
1272 This is the default.
1273
1274 @node MEANS
1275 @section MEANS
1276
1277 @vindex MEANS
1278 @cindex means
1279
1280 @display
1281 MEANS [TABLES =]
1282       @{@var{var_list}@}
1283         [ BY @{@var{var_list}@} [BY @{@var{var_list}@} [BY @{@var{var_list}@} @dots{} ]]]
1284
1285       [ /@{@var{var_list}@}
1286          [ BY @{@var{var_list}@} [BY @{@var{var_list}@} [BY @{@var{var_list}@} @dots{} ]]] ]
1287
1288       [/CELLS = [MEAN] [COUNT] [STDDEV] [SEMEAN] [SUM] [MIN] [MAX] [RANGE]
1289         [VARIANCE] [KURT] [SEKURT]
1290         [SKEW] [SESKEW] [FIRST] [LAST]
1291         [HARMONIC] [GEOMETRIC]
1292         [DEFAULT]
1293         [ALL]
1294         [NONE] ]
1295
1296       [/MISSING = [INCLUDE] [DEPENDENT]]
1297 @end display
1298
1299 You can use the @cmd{MEANS} command to calculate the arithmetic mean and similar
1300 statistics, either for the dataset as a whole or for categories of data.
1301
1302 The simplest form of the command is
1303 @example
1304 MEANS @var{v}.
1305 @end example
1306 @noindent which calculates the mean, count and standard deviation for @var{v}.
1307 If you specify a grouping variable, for example
1308 @example
1309 MEANS @var{v} BY @var{g}.
1310 @end example
1311 @noindent then the means, counts and standard deviations for @var{v} after having
1312 been grouped by @var{g} are calculated.
1313 Instead of the mean, count and standard deviation, you could specify the statistics
1314 in which you are interested:
1315 @example
1316 MEANS @var{x} @var{y} BY @var{g}
1317       /CELLS = HARMONIC SUM MIN.
1318 @end example
1319 This example calculates the harmonic mean, the sum and the minimum values of @var{x} and @var{y}
1320 grouped by @var{g}.
1321
1322 The @subcmd{CELLS} subcommand specifies which statistics to calculate.  The available statistics
1323 are:
1324 @itemize
1325 @item @subcmd{MEAN}
1326 @cindex arithmetic mean
1327       The arithmetic mean.
1328 @item @subcmd{COUNT}
1329       The count of the values.
1330 @item @subcmd{STDDEV}
1331       The standard deviation.
1332 @item @subcmd{SEMEAN}
1333       The standard error of the mean.
1334 @item @subcmd{SUM}
1335       The sum of the values.
1336 @item @subcmd{MIN}
1337       The minimum value.
1338 @item @subcmd{MAX}
1339       The maximum value.
1340 @item @subcmd{RANGE}
1341       The difference between the maximum and minimum values.
1342 @item @subcmd{VARIANCE}
1343       The variance.
1344 @item @subcmd{FIRST}
1345       The first value in the category.
1346 @item @subcmd{LAST}
1347       The last value in the category.
1348 @item @subcmd{SKEW}
1349       The skewness.
1350 @item @subcmd{SESKEW}
1351       The standard error of the skewness.
1352 @item @subcmd{KURT}
1353       The kurtosis
1354 @item @subcmd{SEKURT}
1355       The standard error of the kurtosis.
1356 @item @subcmd{HARMONIC}
1357 @cindex harmonic mean
1358       The harmonic mean.
1359 @item @subcmd{GEOMETRIC}
1360 @cindex geometric mean
1361       The geometric mean.
1362 @end itemize
1363
1364 In addition, three special keywords are recognized:
1365 @itemize
1366 @item @subcmd{DEFAULT}
1367       This is the same as @subcmd{MEAN} @subcmd{COUNT} @subcmd{STDDEV}.
1368 @item @subcmd{ALL}
1369       All of the above statistics are calculated.
1370 @item @subcmd{NONE}
1371       No statistics are calculated (only a summary is shown).
1372 @end itemize
1373
1374
1375 More than one @dfn{table} can be specified in a single command.
1376 Each table is separated by a @samp{/}. For
1377 example
1378 @example
1379 MEANS TABLES =
1380       @var{c} @var{d} @var{e} BY @var{x}
1381       /@var{a} @var{b} BY @var{x} @var{y}
1382       /@var{f} BY @var{y} BY @var{z}.
1383 @end example
1384 has three tables (the @samp{TABLE =} is optional).
1385 The first table has three dependent variables @var{c}, @var{d} and @var{e}
1386 and a single categorical variable @var{x}.
1387 The second table has two dependent variables @var{a} and @var{b},
1388 and two categorical variables @var{x} and @var{y}.
1389 The third table has a single dependent variables @var{f}
1390 and a categorical variable formed by the combination of @var{y} and @var{z}.
1391
1392
1393 By default values are omitted from the analysis only if missing values
1394 (either system missing or user missing)
1395 for any of the variables directly involved in their calculation are
1396 encountered.
1397 This behaviour can be modified with the  @subcmd{/MISSING} subcommand.
1398 Three options are possible: @subcmd{TABLE}, @subcmd{INCLUDE} and @subcmd{DEPENDENT}.
1399
1400 @subcmd{/MISSING = INCLUDE} says that user missing values, either in the dependent
1401 variables or in the categorical variables should be taken at their face
1402 value, and not excluded.
1403
1404 @subcmd{/MISSING = DEPENDENT} says that user missing values, in the dependent
1405 variables should be taken at their face value, however cases which
1406 have user missing values for the categorical variables should be omitted
1407 from the calculation.
1408
1409 @subsection Example Means
1410
1411 The dataset in @file{repairs.sav} contains the mean time between failures (@exvar{mtbf})
1412 for a sample of artifacts produced by different factories and trialed under
1413 different operating conditions.
1414 Since there are four combinations of categorical variables, by simply looking
1415 at the list of data, it would be hard to how the scores vary for each category.
1416 @ref{means:ex} shows one way of tabulating the @exvar{mtbf} in a way which is
1417 easier to understand.
1418
1419 @float Example, means:ex
1420 @psppsyntax {means.sps}
1421 @caption {Running @cmd{MEANS} on the @exvar{mtbf} score with categories @exvar{factory} and @exvar{environment}}
1422 @end float
1423
1424 The results are shown in @ref{means:res}.   The figures shown indicate the mean,
1425 standard deviation and number of samples in each category.
1426 These figures however do not indicate whether the results are statistically
1427 significant.  For that, you would need to use the procedures @cmd{ONEWAY}, @cmd{GLM} or
1428 @cmd{T-TEST} depending on the hypothesis being tested.
1429
1430 @float Result, means:res
1431 @psppoutput {means}
1432 @caption {The @exvar{mtbf} categorised by @exvar{factory} and @exvar{environment}}
1433 @end float
1434
1435 Note that there is no limit to the number of variables for which you can calculate
1436 statistics, nor to the number of categorical variables per layer, nor the number
1437 of layers.
1438 However, running @cmd{MEANS} on a large numbers of variables, or with categorical variables
1439 containing a large number of distinct values may result in an extremely large output, which
1440 will not be easy to interpret.
1441 So you should consider carefully which variables to select for participation in the analysis.
1442
1443 @node NPAR TESTS
1444 @section NPAR TESTS
1445
1446 @vindex NPAR TESTS
1447 @cindex nonparametric tests
1448
1449 @display
1450 NPAR TESTS
1451
1452      nonparametric test subcommands
1453      .
1454      .
1455      .
1456
1457      [ /STATISTICS=@{DESCRIPTIVES@} ]
1458
1459      [ /MISSING=@{ANALYSIS, LISTWISE@} @{INCLUDE, EXCLUDE@} ]
1460
1461      [ /METHOD=EXACT [ TIMER [(@var{n})] ] ]
1462 @end display
1463
1464 @cmd{NPAR TESTS} performs nonparametric tests.
1465 Non parametric tests make very few assumptions about the distribution of the
1466 data.
1467 One or more tests may be specified by using the corresponding subcommand.
1468 If the @subcmd{/STATISTICS} subcommand is also specified, then summary statistics are
1469 produces for each variable that is the subject of any test.
1470
1471 Certain tests may take a long time to execute, if an exact figure is required.
1472 Therefore, by default asymptotic approximations are used unless the
1473 subcommand @subcmd{/METHOD=EXACT} is specified.
1474 Exact tests give more accurate results, but may take an unacceptably long
1475 time to perform.  If the @subcmd{TIMER} keyword is used, it sets a maximum time,
1476 after which the test is abandoned, and a warning message printed.
1477 The time, in minutes, should be specified in parentheses after the @subcmd{TIMER} keyword.
1478 If the @subcmd{TIMER} keyword is given without this figure, then a default value of 5 minutes
1479 is used.
1480
1481
1482 @menu
1483 * BINOMIAL::                Binomial Test
1484 * CHISQUARE::               Chi-square Test
1485 * COCHRAN::                 Cochran Q Test
1486 * FRIEDMAN::                Friedman Test
1487 * KENDALL::                 Kendall's W Test
1488 * KOLMOGOROV-SMIRNOV::      Kolmogorov Smirnov Test
1489 * KRUSKAL-WALLIS::          Kruskal-Wallis Test
1490 * MANN-WHITNEY::            Mann Whitney U Test
1491 * MCNEMAR::                 McNemar Test
1492 * MEDIAN::                  Median Test
1493 * RUNS::                    Runs Test
1494 * SIGN::                    The Sign Test
1495 * WILCOXON::                Wilcoxon Signed Ranks Test
1496 @end menu
1497
1498
1499 @node    BINOMIAL
1500 @subsection Binomial test
1501 @vindex BINOMIAL
1502 @cindex binomial test
1503
1504 @display
1505      [ /BINOMIAL[(@var{p})]=@var{var_list}[(@var{value1}[, @var{value2})] ] ]
1506 @end display
1507
1508 The @subcmd{/BINOMIAL} subcommand compares the observed distribution of a dichotomous
1509 variable with that of a binomial distribution.
1510 The variable @var{p} specifies the test proportion of the binomial
1511 distribution.
1512 The default value of 0.5 is assumed if @var{p} is omitted.
1513
1514 If a single value appears after the variable list, then that value is
1515 used as the threshold to partition the observed values. Values less
1516 than or equal to the threshold value form the first category.  Values
1517 greater than the threshold form the second category.
1518
1519 If two values appear after the variable list, then they are used
1520 as the values which a variable must take to be in the respective
1521 category.
1522 Cases for which a variable takes a value equal to neither of the specified
1523 values, take no part in the test for that variable.
1524
1525 If no values appear, then the variable must assume dichotomous
1526 values.
1527 If more than two distinct, non-missing values for a variable
1528 under test are encountered then an error occurs.
1529
1530 If the test proportion is equal to 0.5, then a two tailed test is
1531 reported.   For any other test proportion, a one tailed test is
1532 reported.
1533 For one tailed tests, if the test proportion is less than
1534 or equal to the observed proportion, then the significance of
1535 observing the observed proportion or more is reported.
1536 If the test proportion is more than the observed proportion, then the
1537 significance of observing the observed proportion or less is reported.
1538 That is to say, the test is always performed in the observed
1539 direction.
1540
1541 @pspp{} uses a very precise approximation to the gamma function to
1542 compute the binomial significance.  Thus, exact results are reported
1543 even for very large sample sizes.
1544
1545
1546 @node    CHISQUARE
1547 @subsection Chi-square Test
1548 @vindex CHISQUARE
1549 @cindex chi-square test
1550
1551
1552 @display
1553      [ /CHISQUARE=@var{var_list}[(@var{lo},@var{hi})] [/EXPECTED=@{EQUAL|@var{f1}, @var{f2} @dots{} @var{fn}@}] ]
1554 @end display
1555
1556
1557 The @subcmd{/CHISQUARE} subcommand produces a chi-square statistic for the differences
1558 between the expected and observed frequencies of the categories of a variable.
1559 Optionally, a range of values may appear after the variable list.
1560 If a range is given, then non integer values are truncated, and values
1561 outside the  specified range are excluded from the analysis.
1562
1563 The @subcmd{/EXPECTED} subcommand specifies the expected values of each
1564 category.
1565 There must be exactly one non-zero expected value, for each observed
1566 category, or the @subcmd{EQUAL} keyword must be specified.
1567 You may use the notation @subcmd{@var{n}*@var{f}} to specify @var{n}
1568 consecutive expected categories all taking a frequency of @var{f}.
1569 The frequencies given are proportions, not absolute frequencies.  The
1570 sum of the frequencies need not be 1.
1571 If no @subcmd{/EXPECTED} subcommand is given, then equal frequencies
1572 are expected.
1573
1574 @subsubsection Chi-square Example
1575
1576 A researcher wishes to investigate whether there are an equal number of
1577 persons of each sex in a population.   The sample chosen for invesigation
1578 is that from the @file {physiology.sav} dataset.   The null hypothesis for
1579 the test is that the population comprises an equal number of males and females.
1580 The analysis is performed as shown in @ref{chisquare:ex}.
1581
1582 @float Example, chisquare:ex
1583 @psppsyntax {chisquare.sps}
1584 @caption {Performing a chi-square test to check for equal distribution of sexes}
1585 @end float
1586
1587 There is only one test variable, @i{viz:} @exvar{sex}.  The other variables in the dataset
1588 are ignored.
1589
1590 @float Screenshot, chisquare:scr
1591 @psppimage {chisquare}
1592 @caption {Performing a chi-square test using the graphic user interface}
1593 @end float
1594
1595 In @ref{chisquare:res} the summary box shows that in the sample, there are more males
1596 than females.  However the significance of chi-square result is greater than 0.05
1597 --- the most commonly accepted p-value --- and therefore
1598 there is not enough evidence to reject the null hypothesis and one must conclude
1599 that the evidence does not indicate that there is an imbalance of the sexes
1600 in the population.
1601
1602 @float Result, chisquare:res
1603 @psppoutput {chisquare}
1604 @caption {The results of running a chi-square test on @exvar{sex}}
1605 @end float
1606
1607
1608 @node COCHRAN
1609 @subsection Cochran Q Test
1610 @vindex Cochran
1611 @cindex Cochran Q test
1612 @cindex Q, Cochran Q
1613
1614 @display
1615      [ /COCHRAN = @var{var_list} ]
1616 @end display
1617
1618 The Cochran Q test is used to test for differences between three or more groups.
1619 The data for @var{var_list} in all cases must assume exactly two
1620 distinct values (other than missing values).
1621
1622 The value of Q is displayed along with its Asymptotic significance
1623 based on a chi-square distribution.
1624
1625 @node FRIEDMAN
1626 @subsection Friedman Test
1627 @vindex FRIEDMAN
1628 @cindex Friedman test
1629
1630 @display
1631      [ /FRIEDMAN = @var{var_list} ]
1632 @end display
1633
1634 The Friedman test is used to test for differences between repeated measures when
1635 there is no indication that the distributions are normally distributed.
1636
1637 A list of variables which contain the measured data must be given.  The procedure
1638 prints the sum of ranks for each variable, the test statistic and its significance.
1639
1640 @node KENDALL
1641 @subsection Kendall's W Test
1642 @vindex KENDALL
1643 @cindex Kendall's W test
1644 @cindex coefficient of concordance
1645
1646 @display
1647      [ /KENDALL = @var{var_list} ]
1648 @end display
1649
1650 The Kendall test investigates whether an arbitrary number of related samples come from the
1651 same population.
1652 It is identical to the Friedman test except that the additional statistic W, Kendall's Coefficient of Concordance is printed.
1653 It has the range [0,1] --- a value of zero indicates no agreement between the samples whereas a value of
1654 unity indicates complete agreement.
1655
1656
1657 @node KOLMOGOROV-SMIRNOV
1658 @subsection Kolmogorov-Smirnov Test
1659 @vindex KOLMOGOROV-SMIRNOV
1660 @vindex K-S
1661 @cindex Kolmogorov-Smirnov test
1662
1663 @display
1664      [ /KOLMOGOROV-SMIRNOV (@{NORMAL [@var{mu}, @var{sigma}], UNIFORM [@var{min}, @var{max}], POISSON [@var{lambda}], EXPONENTIAL [@var{scale}] @}) = @var{var_list} ]
1665 @end display
1666
1667 The one sample Kolmogorov-Smirnov subcommand is used to test whether or not a dataset is
1668 drawn from a particular distribution.  Four distributions are supported, @i{viz:}
1669 Normal, Uniform, Poisson and Exponential.
1670
1671 Ideally you should provide the parameters of the distribution against
1672 which you wish to test the data. For example, with the normal
1673 distribution  the mean (@var{mu})and standard deviation (@var{sigma})
1674 should be given; with the uniform distribution, the minimum
1675 (@var{min})and maximum (@var{max}) value should be provided.
1676 However, if the parameters are omitted they are imputed from the
1677 data.  Imputing the parameters reduces the power of the test so should
1678 be avoided if possible.
1679
1680 In the following example, two variables @var{score} and @var{age} are
1681 tested to see if they follow a normal distribution with a mean of 3.5
1682 and a standard deviation of 2.0.
1683 @example
1684   NPAR TESTS
1685         /KOLMOGOROV-SMIRNOV (normal 3.5 2.0) = @var{score} @var{age}.
1686 @end example
1687 If the variables need to be tested against different distributions, then a separate
1688 subcommand must be used.  For example the following syntax tests @var{score} against
1689 a normal distribution with mean of 3.5 and standard deviation of 2.0 whilst @var{age}
1690 is tested against a normal distribution of mean 40 and standard deviation 1.5.
1691 @example
1692   NPAR TESTS
1693         /KOLMOGOROV-SMIRNOV (normal 3.5 2.0) = @var{score}
1694         /KOLMOGOROV-SMIRNOV (normal 40 1.5) =  @var{age}.
1695 @end example
1696
1697 The abbreviated subcommand  @subcmd{K-S} may be used in place of @subcmd{KOLMOGOROV-SMIRNOV}.
1698
1699 @node KRUSKAL-WALLIS
1700 @subsection Kruskal-Wallis Test
1701 @vindex KRUSKAL-WALLIS
1702 @vindex K-W
1703 @cindex Kruskal-Wallis test
1704
1705 @display
1706      [ /KRUSKAL-WALLIS = @var{var_list} BY var (@var{lower}, @var{upper}) ]
1707 @end display
1708
1709 The Kruskal-Wallis test is used to compare data from an
1710 arbitrary number of populations.  It does not assume normality.
1711 The data to be compared are specified by @var{var_list}.
1712 The categorical variable determining the groups to which the
1713 data belongs is given by @var{var}. The limits @var{lower} and
1714 @var{upper} specify the valid range of @var{var}.
1715 If @var{upper} is smaller than @var{lower}, the PSPP will assume their values
1716 to be reversed. Any cases for which @var{var} falls outside
1717 [@var{lower}, @var{upper}] are ignored.
1718
1719 The mean rank of each group as well as the chi-squared value and
1720 significance of the test are printed.
1721 The abbreviated subcommand  @subcmd{K-W} may be used in place of
1722 @subcmd{KRUSKAL-WALLIS}.
1723
1724
1725 @node MANN-WHITNEY
1726 @subsection Mann-Whitney U Test
1727 @vindex MANN-WHITNEY
1728 @vindex M-W
1729 @cindex Mann-Whitney U test
1730 @cindex U, Mann-Whitney U
1731
1732 @display
1733      [ /MANN-WHITNEY = @var{var_list} BY var (@var{group1}, @var{group2}) ]
1734 @end display
1735
1736 The Mann-Whitney subcommand is used to test whether two groups of data
1737 come from different populations. The variables to be tested should be
1738 specified in @var{var_list} and the grouping variable, that determines
1739 to which group the test variables belong, in @var{var}.
1740 @var{Var} may be either a string or an alpha variable.
1741 @var{Group1} and @var{group2} specify the
1742 two values of @var{var} which determine the groups of the test data.
1743 Cases for which the @var{var} value is neither @var{group1} or
1744 @var{group2} are ignored.
1745
1746 The value of the Mann-Whitney U statistic, the Wilcoxon W, and the
1747 significance are printed.
1748 You may abbreviated the subcommand @subcmd{MANN-WHITNEY} to
1749 @subcmd{M-W}.
1750
1751
1752 @node MCNEMAR
1753 @subsection McNemar Test
1754 @vindex MCNEMAR
1755 @cindex McNemar test
1756
1757 @display
1758      [ /MCNEMAR @var{var_list} [ WITH @var{var_list} [ (PAIRED) ]]]
1759 @end display
1760
1761 Use McNemar's test to analyse the significance of the difference between
1762 pairs of correlated proportions.
1763
1764 If the @code{WITH} keyword is omitted, then tests for all
1765 combinations of the listed variables are performed.
1766 If the @code{WITH} keyword is given, and the @code{(PAIRED)} keyword
1767 is also given, then the number of variables preceding @code{WITH}
1768 must be the same as the number following it.
1769 In this case, tests for each respective pair of variables are
1770 performed.
1771 If the @code{WITH} keyword is given, but the
1772 @code{(PAIRED)} keyword is omitted, then tests for each combination
1773 of variable preceding @code{WITH} against variable following
1774 @code{WITH} are performed.
1775
1776 The data in each variable must be dichotomous.  If there are more
1777 than two distinct variables an error will occur and the test will
1778 not be run.
1779
1780 @node MEDIAN
1781 @subsection Median Test
1782 @vindex MEDIAN
1783 @cindex Median test
1784
1785 @display
1786      [ /MEDIAN [(@var{value})] = @var{var_list} BY @var{variable} (@var{value1}, @var{value2}) ]
1787 @end display
1788
1789 The median test is used to test whether independent samples come from
1790 populations with a common median.
1791 The median of the populations against which the samples are to be tested
1792 may be given in parentheses immediately after the
1793 @subcmd{/MEDIAN} subcommand.  If it is not given, the median is imputed from the
1794 union of all the samples.
1795
1796 The variables of the samples to be tested should immediately follow the @samp{=} sign. The
1797 keyword @code{BY} must come next, and then the grouping variable.  Two values
1798 in parentheses should follow.  If the first value is greater than the second,
1799 then a 2 sample test is performed using these two values to determine the groups.
1800 If however, the first variable is less than the second, then a @i{k} sample test is
1801 conducted and the group values used are all values encountered which lie in the
1802 range [@var{value1},@var{value2}].
1803
1804
1805 @node RUNS
1806 @subsection Runs Test
1807 @vindex RUNS
1808 @cindex runs test
1809
1810 @display
1811      [ /RUNS (@{MEAN, MEDIAN, MODE, @var{value}@})  = @var{var_list} ]
1812 @end display
1813
1814 The @subcmd{/RUNS} subcommand tests whether a data sequence is randomly ordered.
1815
1816 It works by examining the number of times a variable's value crosses a given threshold.
1817 The desired threshold must be specified within parentheses.
1818 It may either be specified as a number or as one of @subcmd{MEAN}, @subcmd{MEDIAN} or @subcmd{MODE}.
1819 Following the threshold specification comes the list of variables whose values are to be
1820 tested.
1821
1822 The subcommand shows the number of runs, the asymptotic significance based on the
1823 length of the data.
1824
1825 @node SIGN
1826 @subsection Sign Test
1827 @vindex SIGN
1828 @cindex sign test
1829
1830 @display
1831      [ /SIGN @var{var_list} [ WITH @var{var_list} [ (PAIRED) ]]]
1832 @end display
1833
1834 The @subcmd{/SIGN} subcommand tests for differences between medians of the
1835 variables listed.
1836 The test does not make any assumptions about the
1837 distribution of the data.
1838
1839 If the @code{WITH} keyword is omitted, then tests for all
1840 combinations of the listed variables are performed.
1841 If the @code{WITH} keyword is given, and the @code{(PAIRED)} keyword
1842 is also given, then the number of variables preceding @code{WITH}
1843 must be the same as the number following it.
1844 In this case, tests for each respective pair of variables are
1845 performed.
1846 If the @code{WITH} keyword is given, but the
1847 @code{(PAIRED)} keyword is omitted, then tests for each combination
1848 of variable preceding @code{WITH} against variable following
1849 @code{WITH} are performed.
1850
1851 @node WILCOXON
1852 @subsection Wilcoxon Matched Pairs Signed Ranks Test
1853 @vindex WILCOXON
1854 @cindex wilcoxon matched pairs signed ranks test
1855
1856 @display
1857      [ /WILCOXON @var{var_list} [ WITH @var{var_list} [ (PAIRED) ]]]
1858 @end display
1859
1860 The @subcmd{/WILCOXON} subcommand tests for differences between medians of the
1861 variables listed.
1862 The test does not make any assumptions about the variances of the samples.
1863 It does however assume that the distribution is symmetrical.
1864
1865 If the @subcmd{WITH} keyword is omitted, then tests for all
1866 combinations of the listed variables are performed.
1867 If the @subcmd{WITH} keyword is given, and the @subcmd{(PAIRED)} keyword
1868 is also given, then the number of variables preceding @subcmd{WITH}
1869 must be the same as the number following it.
1870 In this case, tests for each respective pair of variables are
1871 performed.
1872 If the @subcmd{WITH} keyword is given, but the
1873 @subcmd{(PAIRED)} keyword is omitted, then tests for each combination
1874 of variable preceding @subcmd{WITH} against variable following
1875 @subcmd{WITH} are performed.
1876
1877 @node T-TEST
1878 @section T-TEST
1879
1880 @vindex T-TEST
1881
1882 @display
1883 T-TEST
1884         /MISSING=@{ANALYSIS,LISTWISE@} @{EXCLUDE,INCLUDE@}
1885         /CRITERIA=CI(@var{confidence})
1886
1887
1888 (One Sample mode.)
1889         TESTVAL=@var{test_value}
1890         /VARIABLES=@var{var_list}
1891
1892
1893 (Independent Samples mode.)
1894         GROUPS=var(@var{value1} [, @var{value2}])
1895         /VARIABLES=@var{var_list}
1896
1897
1898 (Paired Samples mode.)
1899         PAIRS=@var{var_list} [WITH @var{var_list} [(PAIRED)] ]
1900
1901 @end display
1902
1903
1904 The @cmd{T-TEST} procedure outputs tables used in testing hypotheses about
1905 means.
1906 It operates in one of three modes:
1907 @itemize
1908 @item One Sample mode.
1909 @item Independent Groups mode.
1910 @item Paired mode.
1911 @end itemize
1912
1913 @noindent
1914 Each of these modes are described in more detail below.
1915 There are two optional subcommands which are common to all modes.
1916
1917 The @cmd{/CRITERIA} subcommand tells @pspp{} the confidence interval used
1918 in the tests.  The default value is 0.95.
1919
1920
1921 The @cmd{MISSING} subcommand determines the handling of missing
1922 variables.
1923 If @subcmd{INCLUDE} is set, then user-missing values are included in the
1924 calculations, but system-missing values are not.
1925 If @subcmd{EXCLUDE} is set, which is the default, user-missing
1926 values are excluded as well as system-missing values.
1927 This is the default.
1928
1929 If @subcmd{LISTWISE} is set, then the entire case is excluded from analysis
1930 whenever any variable  specified in the @subcmd{/VARIABLES}, @subcmd{/PAIRS} or
1931 @subcmd{/GROUPS} subcommands contains a missing value.
1932 If @subcmd{ANALYSIS} is set, then missing values are excluded only in the analysis for
1933 which they would be needed. This is the default.
1934
1935
1936 @menu
1937 * One Sample Mode::             Testing against a hypothesized mean
1938 * Independent Samples Mode::    Testing two independent groups for equal mean
1939 * Paired Samples Mode::         Testing two interdependent groups for equal mean
1940 @end menu
1941
1942 @node One Sample Mode
1943 @subsection One Sample Mode
1944
1945 The @subcmd{TESTVAL} subcommand invokes the One Sample mode.
1946 This mode is used to test a population mean against a hypothesized
1947 mean.
1948 The value given to the @subcmd{TESTVAL} subcommand is the value against
1949 which you wish to test.
1950 In this mode, you must also use the @subcmd{/VARIABLES} subcommand to
1951 tell @pspp{} which variables you wish to test.
1952
1953 @subsubsection Example - One Sample T-test
1954
1955 A researcher wishes to know whether the weight of persons in a population
1956 is different from the national average.
1957 The samples are drawn from the population under investigation and recorded
1958 in the file @file{physiology.sav}.
1959 From the Department of Health, she
1960 knows that the national average weight of healthy adults is 76.8kg.
1961 Accordingly the @subcmd{TESTVAL} is set to 76.8.
1962 The null hypothesis therefore is that the mean average weight of the
1963 population from which the sample was drawn is 76.8kg.
1964
1965 As previously noted (@pxref{Identifying incorrect data}), one
1966 sample in the dataset contains a weight value
1967 which is clearly incorrect.  So this is excluded from the analysis
1968 using the @cmd{SELECT} command.
1969
1970 @float Example, one-sample-t:ex
1971 @psppsyntax {one-sample-t.sps}
1972 @caption {Running a one sample T-Test after excluding all non-positive values}
1973 @end float
1974
1975 @float Screenshot, one-sample-t:scr
1976 @psppimage {one-sample-t}
1977 @caption {Using the One Sample T-Test dialog box to test @exvar{weight} for a mean of 76.8kg}
1978 @end float
1979
1980
1981 @ref{one-sample-t:res} shows that the mean of our sample differs from the test value
1982 by -1.40kg.  However the significance is very high (0.610).  So one cannot
1983 reject the null hypothesis, and must conclude there is not enough evidence
1984 to suggest that the mean weight of the persons in our population is different
1985 from 76.8kg.
1986
1987 @float Results, one-sample-t:res
1988 @psppoutput {one-sample-t}
1989 @caption {The results of a one sample T-test of @exvar{weight} using a test value of 76.8kg}
1990 @end float
1991
1992 @node Independent Samples Mode
1993 @subsection Independent Samples Mode
1994
1995 The @subcmd{GROUPS} subcommand invokes Independent Samples mode or
1996 `Groups' mode.
1997 This mode is used to test whether two groups of values have the
1998 same population mean.
1999 In this mode, you must also use the @subcmd{/VARIABLES} subcommand to
2000 tell @pspp{} the dependent variables you wish to test.
2001
2002 The variable given in the @subcmd{GROUPS} subcommand is the independent
2003 variable which determines to which group the samples belong.
2004 The values in parentheses are the specific values of the independent
2005 variable for each group.
2006 If the parentheses are omitted and no values are given, the default values
2007 of 1.0 and 2.0 are assumed.
2008
2009 If the independent variable is numeric,
2010 it is acceptable to specify only one value inside the parentheses.
2011 If you do this, cases where the independent variable is
2012 greater than or equal to this value belong to the first group, and cases
2013 less than this value belong to the second group.
2014 When using this form of the @subcmd{GROUPS} subcommand, missing values in
2015 the independent variable are excluded on a listwise basis, regardless
2016 of whether @subcmd{/MISSING=LISTWISE} was specified.
2017
2018 @subsubsection Example - Independent Samples T-test
2019
2020 A researcher wishes to know whether within a population, adult males
2021 are taller than adult females.
2022 The samples are drawn from the population under investigation and recorded
2023 in the file @file{physiology.sav}.
2024
2025 As previously noted (@pxref{Identifying incorrect data}), one
2026 sample in the dataset contains a height value
2027 which is clearly incorrect.  So this is excluded from the analysis
2028 using the @cmd{SELECT} command.
2029
2030
2031 @float Example, indepdendent-samples-t:ex
2032 @psppsyntax {independent-samples-t.sps}
2033 @caption {Running a independent samples T-Test after excluding all observations less than 200kg}
2034 @end float
2035
2036
2037 The null hypothesis is that both males and females are on average
2038 of equal height.
2039
2040 @float Screenshot, independent-samples-t:scr
2041 @psppimage {independent-samples-t}
2042 @caption {Using the Independent Sample T-test dialog, to test for differences of @exvar{height} between values of @exvar{sex}}
2043 @end float
2044
2045
2046 In this case, the grouping variable is @exvar{sex}, so this is entered
2047 as the variable for the @subcmd{GROUP} subcommand.  The group values are  0 (male) and
2048 1 (female).
2049
2050 If you are running the proceedure using syntax, then you need to enter
2051 the values corresponding to each group within parentheses.
2052 If you are using the graphic user interface, then you have to open
2053 the ``Define Groups'' dialog box and enter the values corresponding
2054 to each group as shown in @ref{define-groups-t:scr}.  If, as in this case, the dataset has defined value
2055 labels for the group variable, then you can enter them by label
2056 or by value.
2057
2058 @float Screenshot, define-groups-t:scr
2059 @psppimage {define-groups-t}
2060 @caption {Setting the values of the grouping variable for an Independent Samples T-test}
2061 @end float
2062
2063 From @ref{independent-samples-t:res}, one can clearly see that the @emph{sample} mean height
2064 is greater for males than for females.  However in order to see if this
2065 is a significant result, one must consult the T-Test table.
2066
2067 The T-Test table contains two rows; one for use if the variance of the samples
2068 in each group may be safely assumed to be equal, and the second row
2069 if the variances in each group may not be safely assumed to be equal.
2070
2071 In this case however, both rows show a 2-tailed significance less than 0.001 and
2072 one must therefore reject the null hypothesis and conclude that within
2073 the population the mean height of males and of females are unequal.
2074
2075 @float Result, independent-samples-t:res
2076 @psppoutput {independent-samples-t}
2077 @caption {The results of an independent samples T-test of @exvar{height} by @exvar{sex}}
2078 @end float
2079
2080 @node Paired Samples Mode
2081 @subsection Paired Samples Mode
2082
2083 The @cmd{PAIRS} subcommand introduces Paired Samples mode.
2084 Use this mode when repeated measures have been taken from the same
2085 samples.
2086 If the @subcmd{WITH} keyword is omitted, then tables for all
2087 combinations of variables given in the @cmd{PAIRS} subcommand are
2088 generated.
2089 If the @subcmd{WITH} keyword is given, and the @subcmd{(PAIRED)} keyword
2090 is also given, then the number of variables preceding @subcmd{WITH}
2091 must be the same as the number following it.
2092 In this case, tables for each respective pair of variables are
2093 generated.
2094 In the event that the @subcmd{WITH} keyword is given, but the
2095 @subcmd{(PAIRED)} keyword is omitted, then tables for each combination
2096 of variable preceding @subcmd{WITH} against variable following
2097 @subcmd{WITH} are generated.
2098
2099
2100 @node ONEWAY
2101 @section ONEWAY
2102
2103 @vindex ONEWAY
2104 @cindex analysis of variance
2105 @cindex ANOVA
2106
2107 @display
2108 ONEWAY
2109         [/VARIABLES = ] @var{var_list} BY @var{var}
2110         /MISSING=@{ANALYSIS,LISTWISE@} @{EXCLUDE,INCLUDE@}
2111         /CONTRAST= @var{value1} [, @var{value2}] ... [,@var{valueN}]
2112         /STATISTICS=@{DESCRIPTIVES,HOMOGENEITY@}
2113         /POSTHOC=@{BONFERRONI, GH, LSD, SCHEFFE, SIDAK, TUKEY, ALPHA ([@var{value}])@}
2114 @end display
2115
2116 The @cmd{ONEWAY} procedure performs a one-way analysis of variance of
2117 variables factored by a single independent variable.
2118 It is used to compare the means of a population
2119 divided into more than two groups.
2120
2121 The dependent variables to be analysed should be given in the @subcmd{VARIABLES}
2122 subcommand.
2123 The list of variables must be followed by the @subcmd{BY} keyword and
2124 the name of the independent (or factor) variable.
2125
2126 You can use the @subcmd{STATISTICS} subcommand to tell @pspp{} to display
2127 ancillary information.  The options accepted are:
2128 @itemize
2129 @item DESCRIPTIVES
2130 Displays descriptive statistics about the groups factored by the independent
2131 variable.
2132 @item HOMOGENEITY
2133 Displays the Levene test of Homogeneity of Variance for the
2134 variables and their groups.
2135 @end itemize
2136
2137 The @subcmd{CONTRAST} subcommand is used when you anticipate certain
2138 differences between the groups.
2139 The subcommand must be followed by a list of numerals which are the
2140 coefficients of the groups to be tested.
2141 The number of coefficients must correspond to the number of distinct
2142 groups (or values of the independent variable).
2143 If the total sum of the coefficients are not zero, then @pspp{} will
2144 display a warning, but will proceed with the analysis.
2145 The @subcmd{CONTRAST} subcommand may be given up to 10 times in order
2146 to specify different contrast tests.
2147 The @subcmd{MISSING} subcommand defines how missing values are handled.
2148 If @subcmd{LISTWISE} is specified then cases which have missing values for
2149 the independent variable or any dependent variable are ignored.
2150 If @subcmd{ANALYSIS} is specified, then cases are ignored if the independent
2151 variable is missing or if the dependent variable currently being
2152 analysed is missing.  The default is @subcmd{ANALYSIS}.
2153 A setting of @subcmd{EXCLUDE} means that variables whose values are
2154 user-missing are to be excluded from the analysis. A setting of
2155 @subcmd{INCLUDE} means they are to be included.  The default is @subcmd{EXCLUDE}.
2156
2157 Using the @code{POSTHOC} subcommand you can perform multiple
2158 pairwise comparisons on the data. The following comparison methods
2159 are available:
2160 @itemize
2161 @item @subcmd{LSD}
2162 Least Significant Difference.
2163 @item @subcmd{TUKEY}
2164 Tukey Honestly Significant Difference.
2165 @item @subcmd{BONFERRONI}
2166 Bonferroni test.
2167 @item @subcmd{SCHEFFE}
2168 Scheff@'e's test.
2169 @item @subcmd{SIDAK}
2170 Sidak test.
2171 @item @subcmd{GH}
2172 The Games-Howell test.
2173 @end itemize
2174
2175 @noindent
2176 Use the optional syntax @code{ALPHA(@var{value})} to indicate that
2177 @cmd{ONEWAY} should perform the posthoc tests at a confidence level of
2178 @var{value}.  If @code{ALPHA(@var{value})} is not specified, then the
2179 confidence level used is 0.05.
2180
2181 @node QUICK CLUSTER
2182 @section QUICK CLUSTER
2183 @vindex QUICK CLUSTER
2184
2185 @cindex K-means clustering
2186 @cindex clustering
2187
2188 @display
2189 QUICK CLUSTER @var{var_list}
2190       [/CRITERIA=CLUSTERS(@var{k}) [MXITER(@var{max_iter})] CONVERGE(@var{epsilon}) [NOINITIAL]]
2191       [/MISSING=@{EXCLUDE,INCLUDE@} @{LISTWISE, PAIRWISE@}]
2192       [/PRINT=@{INITIAL@} @{CLUSTER@}]
2193       [/SAVE[=[CLUSTER[(@var{membership_var})]] [DISTANCE[(@var{distance_var})]]]
2194 @end display
2195
2196 The @cmd{QUICK CLUSTER} command performs k-means clustering on the
2197 dataset.  This is useful when you wish to allocate cases into clusters
2198 of similar values and you already know the number of clusters.
2199
2200 The minimum specification is @samp{QUICK CLUSTER} followed by the names
2201 of the variables which contain the cluster data.  Normally you will also
2202 want to specify @subcmd{/CRITERIA=CLUSTERS(@var{k})} where @var{k} is the
2203 number of clusters.  If this is not specified, then @var{k} defaults to 2.
2204
2205 If you use @subcmd{/CRITERIA=NOINITIAL} then a naive algorithm to select
2206 the initial clusters is used.   This will provide for faster execution but
2207 less well separated initial clusters and hence possibly an inferior final
2208 result.
2209
2210
2211 @cmd{QUICK CLUSTER} uses an iterative algorithm to select the clusters centers.
2212 The subcommand  @subcmd{/CRITERIA=MXITER(@var{max_iter})} sets the maximum number of iterations.
2213 During classification, @pspp{} will continue iterating until until @var{max_iter}
2214 iterations have been done or the convergence criterion (see below) is fulfilled.
2215 The default value of @var{max_iter} is 2.
2216
2217 If however, you specify @subcmd{/CRITERIA=NOUPDATE} then after selecting the initial centers,
2218 no further update to the cluster centers is done.  In this case, @var{max_iter}, if specified.
2219 is ignored.
2220
2221 The subcommand  @subcmd{/CRITERIA=CONVERGE(@var{epsilon})} is used
2222 to set the convergence criterion.  The value of convergence criterion is  @var{epsilon}
2223 times the minimum distance between the @emph{initial} cluster centers.  Iteration stops when
2224 the  mean cluster distance between  one iteration and the next
2225 is less than the convergence criterion.  The default value of @var{epsilon} is zero.
2226
2227 The @subcmd{MISSING} subcommand determines the handling of missing variables.
2228 If @subcmd{INCLUDE} is set, then user-missing values are considered at their face
2229 value and not as missing values.
2230 If @subcmd{EXCLUDE} is set, which is the default, user-missing
2231 values are excluded as well as system-missing values.
2232
2233 If @subcmd{LISTWISE} is set, then the entire case is excluded from the analysis
2234 whenever any of the clustering variables contains a missing value.
2235 If @subcmd{PAIRWISE} is set, then a case is considered missing only if all the
2236 clustering variables contain missing values.  Otherwise it is clustered
2237 on the basis of the non-missing values.
2238 The default is @subcmd{LISTWISE}.
2239
2240 The @subcmd{PRINT} subcommand requests additional output to be printed.
2241 If @subcmd{INITIAL} is set, then the initial cluster memberships will
2242 be printed.
2243 If @subcmd{CLUSTER} is set, the cluster memberships of the individual
2244 cases are displayed (potentially generating lengthy output).
2245
2246 You can specify the subcommand @subcmd{SAVE} to ask that each case's cluster membership
2247 and the euclidean distance between the case and its cluster center be saved to
2248 a new variable in the active dataset.   To save the cluster membership use the
2249 @subcmd{CLUSTER} keyword and to save the distance use the @subcmd{DISTANCE} keyword.
2250 Each keyword may optionally be followed by a variable name in parentheses to specify
2251 the new variable which is to contain the saved parameter.  If no variable name is specified,
2252 then PSPP will create one.
2253
2254 @node RANK
2255 @section RANK
2256
2257 @vindex RANK
2258 @display
2259 RANK
2260         [VARIABLES=] @var{var_list} [@{A,D@}] [BY @var{var_list}]
2261         /TIES=@{MEAN,LOW,HIGH,CONDENSE@}
2262         /FRACTION=@{BLOM,TUKEY,VW,RANKIT@}
2263         /PRINT[=@{YES,NO@}
2264         /MISSING=@{EXCLUDE,INCLUDE@}
2265
2266         /RANK [INTO @var{var_list}]
2267         /NTILES(k) [INTO @var{var_list}]
2268         /NORMAL [INTO @var{var_list}]
2269         /PERCENT [INTO @var{var_list}]
2270         /RFRACTION [INTO @var{var_list}]
2271         /PROPORTION [INTO @var{var_list}]
2272         /N [INTO @var{var_list}]
2273         /SAVAGE [INTO @var{var_list}]
2274 @end display
2275
2276 The @cmd{RANK} command ranks variables and stores the results into new
2277 variables.
2278
2279 The @subcmd{VARIABLES} subcommand, which is mandatory, specifies one or
2280 more variables whose values are to be ranked.
2281 After each variable, @samp{A} or @samp{D} may appear, indicating that
2282 the variable is to be ranked in ascending or descending order.
2283 Ascending is the default.
2284 If a @subcmd{BY} keyword appears, it should be followed by a list of variables
2285 which are to serve as group variables.
2286 In this case, the cases are gathered into groups, and ranks calculated
2287 for each group.
2288
2289 The @subcmd{TIES} subcommand specifies how tied values are to be treated.  The
2290 default is to take the mean value of all the tied cases.
2291
2292 The @subcmd{FRACTION} subcommand specifies how proportional ranks are to be
2293 calculated.  This only has any effect if @subcmd{NORMAL} or @subcmd{PROPORTIONAL} rank
2294 functions are requested.
2295
2296 The @subcmd{PRINT} subcommand may be used to specify that a summary of the rank
2297 variables created should appear in the output.
2298
2299 The function subcommands are @subcmd{RANK}, @subcmd{NTILES}, @subcmd{NORMAL}, @subcmd{PERCENT}, @subcmd{RFRACTION},
2300 @subcmd{PROPORTION} and @subcmd{SAVAGE}.  Any number of function subcommands may appear.
2301 If none are given, then the default is RANK.
2302 The @subcmd{NTILES} subcommand must take an integer specifying the number of
2303 partitions into which values should be ranked.
2304 Each subcommand may be followed by the @subcmd{INTO} keyword and a list of
2305 variables which are the variables to be created and receive the rank
2306 scores.  There may be as many variables specified as there are
2307 variables named on the @subcmd{VARIABLES} subcommand.  If fewer are specified,
2308 then the variable names are automatically created.
2309
2310 The @subcmd{MISSING} subcommand determines how user missing values are to be
2311 treated. A setting of @subcmd{EXCLUDE} means that variables whose values are
2312 user-missing are to be excluded from the rank scores. A setting of
2313 @subcmd{INCLUDE} means they are to be included.  The default is @subcmd{EXCLUDE}.
2314
2315 @include regression.texi
2316
2317
2318 @node RELIABILITY
2319 @section RELIABILITY
2320
2321 @vindex RELIABILITY
2322 @display
2323 RELIABILITY
2324         /VARIABLES=@var{var_list}
2325         /SCALE (@var{name}) = @{@var{var_list}, ALL@}
2326         /MODEL=@{ALPHA, SPLIT[(@var{n})]@}
2327         /SUMMARY=@{TOTAL,ALL@}
2328         /MISSING=@{EXCLUDE,INCLUDE@}
2329 @end display
2330
2331 @cindex Cronbach's Alpha
2332 The @cmd{RELIABILITY} command performs reliability analysis on the data.
2333
2334 The @subcmd{VARIABLES} subcommand is required. It determines the set of variables
2335 upon which analysis is to be performed.
2336
2337 The @subcmd{SCALE} subcommand determines the  variables for which
2338 reliability is to be calculated.  If @subcmd{SCALE} is omitted, then analysis for
2339 all variables named in the @subcmd{VARIABLES} subcommand are used.
2340 Optionally, the @var{name} parameter may be specified to set a string name
2341 for the scale.
2342
2343 The @subcmd{MODEL} subcommand determines the type of analysis. If @subcmd{ALPHA} is specified,
2344 then Cronbach's Alpha is calculated for the scale.  If the model is @subcmd{SPLIT},
2345 then the variables  are divided into 2 subsets.  An optional parameter
2346 @var{n} may be given, to specify how many variables to be in the first subset.
2347 If @var{n} is omitted, then it defaults to one half of the variables in the
2348 scale, or one half minus one if there are an odd number of variables.
2349 The default model is @subcmd{ALPHA}.
2350
2351 By default, any cases with user missing, or system missing values for
2352 any variables given in the @subcmd{VARIABLES} subcommand are omitted
2353 from the analysis.  The @subcmd{MISSING} subcommand determines whether
2354 user missing values are included or excluded in the analysis.
2355
2356 The @subcmd{SUMMARY} subcommand determines the type of summary analysis to be performed.
2357 Currently there is only one type: @subcmd{SUMMARY=TOTAL}, which displays per-item
2358 analysis tested against the totals.
2359
2360 @subsection Example - Reliability
2361
2362 Before analysing the results of a survey -- particularly for a multiple choice survey --
2363 it is desireable to know whether the respondents have considered their answers
2364 or simply provided random answers.
2365
2366 In the following example the survey results from the file @file{hotel.sav} are used.
2367 All five survey questions are included in the reliability analysis.
2368 However, before running the analysis, the data must be preprocessed.
2369 An examination of the survey questions reveals that two questions, @i{viz:} v3 and v5
2370 are negatively worded, whereas the others are positively worded.
2371 All questions must be based upon the same scale for the analysis to be meaningful.
2372 One could use the @cmd{RECODE} command (@pxref{RECODE}), however a simpler way is
2373 to use @cmd{COMPUTE} (@pxref{COMPUTE}) and this is what is done in @ref{reliability:ex}.
2374
2375 @float Example, reliability:ex
2376 @psppsyntax {reliability.sps}
2377 @caption {Investigating the reliability of survey responses}
2378 @end float
2379
2380 In this case, all variables in the data set are used.  So we can use the special
2381 keyword @samp{ALL} (@pxref{BNF}).
2382
2383 @float Screenshot, reliability:src
2384 @psppimage {reliability}
2385 @caption {Reliability dialog box with all variables selected}
2386 @end float
2387
2388 @ref{reliability:res} shows that Cronbach's Alpha is 0.11  which is a value normally considered too
2389 low to indicate consistency within the data.  This is possibly due to the small number of
2390 survey questions.  The survey should be redesigned before serious use of the results are
2391 applied.
2392
2393 @float Result, reliability:res
2394 @psppoutput {reliability}
2395 @caption {The results of the reliability command on @file{hotel.sav}}
2396 @end float
2397
2398
2399 @node ROC
2400 @section ROC
2401
2402 @vindex ROC
2403 @cindex Receiver Operating Characteristic
2404 @cindex Area under curve
2405
2406 @display
2407 ROC     @var{var_list} BY @var{state_var} (@var{state_value})
2408         /PLOT = @{ CURVE [(REFERENCE)], NONE @}
2409         /PRINT = [ SE ] [ COORDINATES ]
2410         /CRITERIA = [ CUTOFF(@{INCLUDE,EXCLUDE@}) ]
2411           [ TESTPOS (@{LARGE,SMALL@}) ]
2412           [ CI (@var{confidence}) ]
2413           [ DISTRIBUTION (@{FREE, NEGEXPO @}) ]
2414         /MISSING=@{EXCLUDE,INCLUDE@}
2415 @end display
2416
2417
2418 The @cmd{ROC} command is used to plot the receiver operating characteristic curve
2419 of a dataset, and to estimate the area under the curve.
2420 This is useful for analysing the efficacy of a variable as a predictor of a state of nature.
2421
2422 The mandatory @var{var_list} is the list of predictor variables.
2423 The variable @var{state_var} is the variable whose values represent the actual states,
2424 and @var{state_value} is the value of this variable which represents the positive state.
2425
2426 The optional subcommand @subcmd{PLOT} is used to determine if and how the @subcmd{ROC} curve is drawn.
2427 The keyword @subcmd{CURVE} means that the @subcmd{ROC} curve should be drawn, and the optional keyword @subcmd{REFERENCE},
2428 which should be enclosed in parentheses, says that the diagonal reference line should be drawn.
2429 If the keyword @subcmd{NONE} is given, then no @subcmd{ROC} curve is drawn.
2430 By default, the curve is drawn with no reference line.
2431
2432 The optional subcommand @subcmd{PRINT} determines which additional
2433 tables should be printed.  Two additional tables are available.  The
2434 @subcmd{SE} keyword says that standard error of the area under the
2435 curve should be printed as well as the area itself.  In addition, a
2436 p-value for the null hypothesis that the area under the curve equals
2437 0.5 is printed.   The @subcmd{COORDINATES} keyword says that a
2438 table of coordinates of the @subcmd{ROC} curve should be printed.
2439
2440 The @subcmd{CRITERIA} subcommand has four optional parameters:
2441 @itemize @bullet
2442 @item The @subcmd{TESTPOS} parameter may be @subcmd{LARGE} or @subcmd{SMALL}.
2443 @subcmd{LARGE} is the default, and says that larger values in the predictor variables are to be
2444 considered positive.  @subcmd{SMALL} indicates that smaller values should be considered positive.
2445
2446 @item The @subcmd{CI} parameter specifies the confidence interval that should be printed.
2447 It has no effect if the @subcmd{SE} keyword in the @subcmd{PRINT} subcommand has not been given.
2448
2449 @item The @subcmd{DISTRIBUTION} parameter determines the method to be used when estimating the area
2450 under the curve.
2451 There are two possibilities, @i{viz}: @subcmd{FREE} and @subcmd{NEGEXPO}.
2452 The @subcmd{FREE} method uses a non-parametric estimate, and the @subcmd{NEGEXPO} method a bi-negative
2453 exponential distribution estimate.
2454 The @subcmd{NEGEXPO} method should only be used when the number of positive actual states is
2455 equal to the number of negative actual states.
2456 The default is @subcmd{FREE}.
2457
2458 @item The @subcmd{CUTOFF} parameter is for compatibility and is ignored.
2459 @end itemize
2460
2461 The @subcmd{MISSING} subcommand determines whether user missing values are to
2462 be included or excluded in the analysis.  The default behaviour is to
2463 exclude them.
2464 Cases are excluded on a listwise basis; if any of the variables in @var{var_list}
2465 or if the variable @var{state_var} is missing, then the entire case is
2466 excluded.
2467
2468 @c  LocalWords:  subcmd subcommand