output: Introduce pivot tables.
[pspp] / src / data / variable.c
1 /* PSPP - a program for statistical analysis.
2    Copyright (C) 1997-9, 2000, 2006, 2009, 2010, 2011, 2012, 2013, 2014, 2016 Free Software Foundation, Inc.
3
4    This program is free software: you can redistribute it and/or modify
5    it under the terms of the GNU General Public License as published by
6    the Free Software Foundation, either version 3 of the License, or
7    (at your option) any later version.
8
9    This program is distributed in the hope that it will be useful,
10    but WITHOUT ANY WARRANTY; without even the implied warranty of
11    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12    GNU General Public License for more details.
13
14    You should have received a copy of the GNU General Public License
15    along with this program.  If not, see <http://www.gnu.org/licenses/>. */
16
17 #include <config.h>
18
19 #include "data/variable.h"
20
21 #include <stdlib.h>
22
23 #include "data/attributes.h"
24 #include "data/data-out.h"
25 #include "data/dictionary.h"
26 #include "data/format.h"
27 #include "data/identifier.h"
28 #include "data/missing-values.h"
29 #include "data/settings.h"
30 #include "data/value-labels.h"
31 #include "data/vardict.h"
32 #include "libpspp/assertion.h"
33 #include "libpspp/compiler.h"
34 #include "libpspp/hash-functions.h"
35 #include "libpspp/i18n.h"
36 #include "libpspp/message.h"
37 #include "libpspp/misc.h"
38 #include "libpspp/str.h"
39
40 #include "gl/minmax.h"
41 #include "gl/xalloc.h"
42
43 #include "gettext.h"
44 #define _(msgid) gettext (msgid)
45 #define N_(msgid) (msgid)
46
47 /* This should follow the definition in Gtk */
48 typedef struct
49 {
50   int value;
51   const char *name;
52   const char *label;
53 } GEnumValue;
54
55 const GEnumValue align[] =
56   {
57     {ALIGN_LEFT,   "left", N_("Left")},
58     {ALIGN_RIGHT,  "right", N_("Right")},
59     {ALIGN_CENTRE, "center", N_("Center")},
60     {0,0,0}
61   };
62
63 const GEnumValue measure[] =
64   {
65     {MEASURE_NOMINAL, "nominal", N_("Nominal")},
66     {MEASURE_ORDINAL, "ordinal", N_("Ordinal")},
67     {MEASURE_SCALE,   "scale", N_("Scale")},
68     {0,0,0}
69   };
70
71 const GEnumValue role[] =
72   {
73     {ROLE_INPUT,  "input",    N_("Input")},
74     {ROLE_TARGET, "output",   N_("Output")},
75     {ROLE_BOTH,   "both",     N_("Both")},
76     {ROLE_NONE,   "none",     N_("None")},
77     {ROLE_PARTITION, "partition", N_("Partition")},
78     {ROLE_SPLIT,  "split",    N_("Split")},
79     {0,0,0}
80   };
81
82 /* A variable. */
83 struct variable
84   {
85     /* Dictionary information. */
86     char *name;                 /* Variable name.  Mixed case. */
87     int width;                  /* 0 for numeric, otherwise string width. */
88     struct missing_values miss; /* Missing values. */
89     struct fmt_spec print;      /* Default format for PRINT. */
90     struct fmt_spec write;      /* Default format for WRITE. */
91     struct val_labs *val_labs;  /* Value labels. */
92     char *label;                /* Variable label. */
93     struct string name_and_label; /* The name and label in the same string */
94
95     /* GUI information. */
96     enum measure measure;       /* Nominal, ordinal, or continuous. */
97     enum var_role role;         /* Intended use. */
98     int display_width;          /* Width of data editor column. */
99     enum alignment alignment;   /* Alignment of data in GUI. */
100
101     /* Case information. */
102     bool leave;                 /* Leave value from case to case? */
103
104     /* Data for use by containing dictionary. */
105     struct vardict_info *vardict;
106
107     /* Used only for system and portable file input and output.
108        See short-names.h. */
109     char **short_names;
110     size_t short_name_cnt;
111
112     /* Custom attributes. */
113     struct attrset attributes;
114   };
115 \f
116
117 static void var_set_print_format_quiet (struct variable *v, const struct fmt_spec *print);
118 static void var_set_write_format_quiet (struct variable *v, const struct fmt_spec *write);
119 static void var_set_label_quiet (struct variable *v, const char *label);
120 static void var_set_name_quiet (struct variable *v, const char *name);
121
122 /* Creates and returns a new variable with the given NAME and
123    WIDTH and other fields initialized to default values.  The
124    variable is not added to a dictionary; for that, use
125    dict_create_var instead. */
126 struct variable *
127 var_create (const char *name, int width)
128 {
129   struct variable *v;
130   enum val_type type;
131
132   assert (width >= 0 && width <= MAX_STRING);
133
134   v = xzalloc (sizeof *v);
135   var_set_name_quiet (v, name);
136   v->width = width;
137   mv_init (&v->miss, width);
138   v->leave = var_must_leave (v);
139   type = val_type_from_width (width);
140   v->alignment = var_default_alignment (type);
141   v->measure = var_default_measure (type);
142   v->role = ROLE_INPUT;
143   v->display_width = var_default_display_width (width);
144   v->print = v->write = var_default_formats (width);
145   attrset_init (&v->attributes);
146   ds_init_empty (&v->name_and_label);
147
148   return v;
149 }
150
151 /* Destroys variable V.
152    V must not belong to a dictionary.  If it does, use
153    dict_delete_var instead. */
154 void
155 var_destroy (struct variable *v)
156 {
157   if (v != NULL)
158     {
159       assert (!var_has_vardict (v));
160       mv_destroy (&v->miss);
161       var_clear_short_names (v);
162       val_labs_destroy (v->val_labs);
163       var_set_label_quiet (v, NULL);
164       attrset_destroy (var_get_attributes (v));
165       free (v->name);
166       ds_destroy (&v->name_and_label);
167       free (v);
168     }
169 }
170 \f
171 /* Variable names. */
172
173 /* Return variable V's name, as a UTF-8 encoded string. */
174 const char *
175 var_get_name (const struct variable *v)
176 {
177   return v->name;
178 }
179
180
181
182 /* Sets V's name to NAME, a UTF-8 encoded string.
183    Do not use this function for a variable in a dictionary.  Use
184    dict_rename_var instead. */
185 static void
186 var_set_name_quiet (struct variable *v, const char *name)
187 {
188   assert (!var_has_vardict (v));
189
190   free (v->name);
191   v->name = xstrdup (name);
192   ds_destroy (&v->name_and_label);
193   ds_init_empty (&v->name_and_label);
194 }
195
196 /* Sets V's name to NAME, a UTF-8 encoded string.
197    Do not use this function for a variable in a dictionary.  Use
198    dict_rename_var instead. */
199 void
200 var_set_name (struct variable *v, const char *name)
201 {
202   struct variable *ov = var_clone (v);
203   var_set_name_quiet (v, name);
204   dict_var_changed (v, VAR_TRAIT_NAME, ov);
205 }
206
207 /* Returns VAR's dictionary class. */
208 enum dict_class
209 var_get_dict_class (const struct variable *var)
210 {
211   return dict_class_from_id (var->name);
212 }
213
214 /* A hsh_compare_func that orders variables A and B by their
215    names. */
216 int
217 compare_vars_by_name (const void *a_, const void *b_, const void *aux UNUSED)
218 {
219   const struct variable *a = a_;
220   const struct variable *b = b_;
221
222   return utf8_strcasecmp (a->name, b->name);
223 }
224
225 /* A hsh_hash_func that hashes variable V based on its name. */
226 unsigned
227 hash_var_by_name (const void *v_, const void *aux UNUSED)
228 {
229   const struct variable *v = v_;
230
231   return utf8_hash_case_string (v->name, 0);
232 }
233
234 /* A hsh_compare_func that orders pointers to variables A and B
235    by their names. */
236 int
237 compare_var_ptrs_by_name (const void *a_, const void *b_,
238                           const void *aux UNUSED)
239 {
240   struct variable *const *a = a_;
241   struct variable *const *b = b_;
242
243   return utf8_strcasecmp (var_get_name (*a), var_get_name (*b));
244 }
245
246 /* A hsh_compare_func that orders pointers to variables A and B
247    by their dictionary indexes. */
248 int
249 compare_var_ptrs_by_dict_index (const void *a_, const void *b_,
250                                 const void *aux UNUSED)
251 {
252   struct variable *const *a = a_;
253   struct variable *const *b = b_;
254   size_t a_index = var_get_dict_index (*a);
255   size_t b_index = var_get_dict_index (*b);
256
257   return a_index < b_index ? -1 : a_index > b_index;
258 }
259
260 /* A hsh_hash_func that hashes pointer to variable V based on its
261    name. */
262 unsigned
263 hash_var_ptr_by_name (const void *v_, const void *aux UNUSED)
264 {
265   struct variable *const *v = v_;
266
267   return utf8_hash_case_string (var_get_name (*v), 0);
268 }
269 \f
270 /* Returns the type of variable V. */
271 enum val_type
272 var_get_type (const struct variable *v)
273 {
274   return val_type_from_width (v->width);
275 }
276
277 /* Returns the width of variable V. */
278 int
279 var_get_width (const struct variable *v)
280 {
281   return v->width;
282 }
283
284 void
285 var_set_width_and_formats (struct variable *v, int new_width,
286                            const struct fmt_spec *print, const struct fmt_spec *write)
287 {
288   struct variable *ov;
289   unsigned int traits = 0;
290
291   ov = var_clone (v);
292
293   if (var_has_missing_values (v))
294     {
295       if (mv_is_resizable (&v->miss, new_width))
296         mv_resize (&v->miss, new_width);
297       else
298         {
299           mv_destroy (&v->miss);
300           mv_init (&v->miss, new_width);
301         }
302       traits |= VAR_TRAIT_MISSING_VALUES;
303     }
304
305   if (v->val_labs != NULL)
306     {
307       if (val_labs_can_set_width (v->val_labs, new_width))
308         val_labs_set_width (v->val_labs, new_width);
309       else
310         {
311           val_labs_destroy (v->val_labs);
312           v->val_labs = NULL;
313         }
314       traits |= VAR_TRAIT_VALUE_LABELS;
315     }
316
317   if (fmt_resize (&v->print, new_width))
318     traits |= VAR_TRAIT_PRINT_FORMAT;
319
320   if (fmt_resize (&v->write, new_width))
321     traits |= VAR_TRAIT_WRITE_FORMAT;
322
323   if (v->width != new_width)
324     {
325       v->width = new_width;
326       traits |= VAR_TRAIT_WIDTH;
327     }
328
329   if (print)
330     {
331       var_set_print_format_quiet (v, print);
332       traits |= VAR_TRAIT_PRINT_FORMAT;
333     }
334
335   if (write)
336     {
337       var_set_write_format_quiet (v, write);
338       traits |= VAR_TRAIT_WRITE_FORMAT;
339     }
340
341   if (traits != 0)
342     dict_var_changed (v, traits, ov);
343 }
344
345 /* Changes the width of V to NEW_WIDTH.
346    This function should be used cautiously. */
347 void
348 var_set_width (struct variable *v, int new_width)
349 {
350   const int old_width = v->width;
351
352   if (old_width == new_width)
353     return;
354
355   var_set_width_and_formats (v, new_width, NULL, NULL);
356 }
357
358
359
360
361 /* Returns true if variable V is numeric, false otherwise. */
362 bool
363 var_is_numeric (const struct variable *v)
364 {
365   return var_get_type (v) == VAL_NUMERIC;
366 }
367
368 /* Returns true if variable V is a string variable, false
369    otherwise. */
370 bool
371 var_is_alpha (const struct variable *v)
372 {
373   return var_get_type (v) == VAL_STRING;
374 }
375 \f
376 /* Returns variable V's missing values. */
377 const struct missing_values *
378 var_get_missing_values (const struct variable *v)
379 {
380   return &v->miss;
381 }
382
383 /* Sets variable V's missing values to MISS, which must be of V's
384    width or at least resizable to V's width.
385    If MISS is null, then V's missing values, if any, are
386    cleared. */
387 static void
388 var_set_missing_values_quiet (struct variable *v, const struct missing_values *miss)
389 {
390   if (miss != NULL)
391     {
392       assert (mv_is_resizable (miss, v->width));
393       mv_destroy (&v->miss);
394       mv_copy (&v->miss, miss);
395       mv_resize (&v->miss, v->width);
396     }
397   else
398     mv_clear (&v->miss);
399 }
400
401 /* Sets variable V's missing values to MISS, which must be of V's
402    width or at least resizable to V's width.
403    If MISS is null, then V's missing values, if any, are
404    cleared. */
405 void
406 var_set_missing_values (struct variable *v, const struct missing_values *miss)
407 {
408   struct variable *ov = var_clone (v);
409   var_set_missing_values_quiet (v, miss);
410   dict_var_changed (v, VAR_TRAIT_MISSING_VALUES, ov);
411 }
412
413 /* Sets variable V to have no user-missing values. */
414 void
415 var_clear_missing_values (struct variable *v)
416 {
417   var_set_missing_values (v, NULL);
418 }
419
420 /* Returns true if V has any user-missing values,
421    false otherwise. */
422 bool
423 var_has_missing_values (const struct variable *v)
424 {
425   return !mv_is_empty (&v->miss);
426 }
427
428 /* Returns true if VALUE is in the given CLASS of missing values
429    in V, false otherwise. */
430 bool
431 var_is_value_missing (const struct variable *v, const union value *value,
432                       enum mv_class class)
433 {
434   return mv_is_value_missing (&v->miss, value, class);
435 }
436
437 /* Returns true if D is in the given CLASS of missing values in
438    V, false otherwise.
439    V must be a numeric variable. */
440 bool
441 var_is_num_missing (const struct variable *v, double d, enum mv_class class)
442 {
443   return mv_is_num_missing (&v->miss, d, class);
444 }
445
446 /* Returns true if S[] is a missing value for V, false otherwise.
447    S[] must contain exactly as many characters as V's width.
448    V must be a string variable. */
449 bool
450 var_is_str_missing (const struct variable *v, const uint8_t s[],
451                     enum mv_class class)
452 {
453   return mv_is_str_missing (&v->miss, s, class);
454 }
455 \f
456 /* Returns variable V's value labels,
457    possibly a null pointer if it has none. */
458 const struct val_labs *
459 var_get_value_labels (const struct variable *v)
460 {
461   return v->val_labs;
462 }
463
464 /* Returns true if variable V has at least one value label. */
465 bool
466 var_has_value_labels (const struct variable *v)
467 {
468   return val_labs_count (v->val_labs) > 0;
469 }
470
471 /* Sets variable V's value labels to a copy of VLS,
472    which must have a width equal to V's width or one that can be
473    changed to V's width.
474    If VLS is null, then V's value labels, if any, are removed. */
475 static void
476 var_set_value_labels_quiet (struct variable *v, const struct val_labs *vls)
477 {
478   val_labs_destroy (v->val_labs);
479   v->val_labs = NULL;
480
481   if (vls != NULL)
482     {
483       assert (val_labs_can_set_width (vls, v->width));
484       v->val_labs = val_labs_clone (vls);
485       val_labs_set_width (v->val_labs, v->width);
486     }
487 }
488
489
490 /* Sets variable V's value labels to a copy of VLS,
491    which must have a width equal to V's width or one that can be
492    changed to V's width.
493    If VLS is null, then V's value labels, if any, are removed. */
494 void
495 var_set_value_labels (struct variable *v, const struct val_labs *vls)
496 {
497   struct variable *ov = var_clone (v);
498   var_set_value_labels_quiet (v, vls);
499   dict_var_changed (v, VAR_TRAIT_LABEL, ov);
500 }
501
502
503 /* Makes sure that V has a set of value labels,
504    by assigning one to it if necessary. */
505 static void
506 alloc_value_labels (struct variable *v)
507 {
508   if (v->val_labs == NULL)
509     v->val_labs = val_labs_create (v->width);
510 }
511
512 /* Attempts to add a value label with the given VALUE and UTF-8 encoded LABEL
513    to V.  Returns true if successful, false otherwise (probably due to an
514    existing label).
515
516    In LABEL, the two-byte sequence "\\n" is interpreted as a new-line. */
517 bool
518 var_add_value_label (struct variable *v,
519                      const union value *value, const char *label)
520 {
521   alloc_value_labels (v);
522   return val_labs_add (v->val_labs, value, label);
523 }
524
525 /* Adds or replaces a value label with the given VALUE and UTF-8 encoded LABEL
526    to V.
527
528    In LABEL, the two-byte sequence "\\n" is interpreted as a new-line. */
529 void
530 var_replace_value_label (struct variable *v,
531                          const union value *value, const char *label)
532 {
533   alloc_value_labels (v);
534   val_labs_replace (v->val_labs, value, label);
535 }
536
537 /* Removes V's value labels, if any. */
538 void
539 var_clear_value_labels (struct variable *v)
540 {
541   var_set_value_labels (v, NULL);
542 }
543
544 /* Returns the label associated with VALUE for variable V, as a UTF-8 string in
545    a format suitable for output, or a null pointer if none. */
546 const char *
547 var_lookup_value_label (const struct variable *v, const union value *value)
548 {
549   return val_labs_find (v->val_labs, value);
550 }
551
552 /*
553    Append to STR the string representation of VALUE for variable V.
554    STR must be a pointer to an initialised struct string.
555 */
556 static void
557 append_value (const struct variable *v, const union value *value,
558               struct string *str)
559 {
560   char *s = data_out (value, var_get_encoding (v), &v->print);
561   ds_put_cstr (str, s);
562   free (s);
563 }
564
565 /* Append STR with a string representing VALUE for variable V.
566    That is, if VALUE has a label, append that label,
567    otherwise format VALUE and append the formatted string.
568    STR must be a pointer to an initialised struct string.
569 */
570 void
571 var_append_value_name (const struct variable *v, const union value *value,
572                        struct string *str)
573 {
574   const char *label = var_lookup_value_label (v, value);
575
576   switch (settings_get_show_values ())
577     {
578     case SETTINGS_VALUE_SHOW_VALUE:
579       append_value (v, value, str);
580       break;
581
582     default:
583     case SETTINGS_VALUE_SHOW_LABEL:
584       if (label)
585         ds_put_cstr (str, label);
586       else
587         append_value (v, value, str);
588       break;
589
590     case SETTINGS_VALUE_SHOW_BOTH:
591       append_value (v, value, str);
592       if (label != NULL)
593         ds_put_format (str, " %s", label);
594       break;
595     }
596 }
597 \f
598 /* Print and write formats. */
599
600 /* Returns V's print format specification. */
601 const struct fmt_spec *
602 var_get_print_format (const struct variable *v)
603 {
604   return &v->print;
605 }
606
607 /* Sets V's print format specification to PRINT, which must be a
608    valid format specification for a variable of V's width
609    (ordinarily an output format, but input formats are not
610    rejected). */
611 static void
612 var_set_print_format_quiet (struct variable *v, const struct fmt_spec *print)
613 {
614   if (!fmt_equal (&v->print, print))
615     {
616       assert (fmt_check_width_compat (print, v->width));
617       v->print = *print;
618     }
619 }
620
621 /* Sets V's print format specification to PRINT, which must be a
622    valid format specification for a variable of V's width
623    (ordinarily an output format, but input formats are not
624    rejected). */
625 void
626 var_set_print_format (struct variable *v, const struct fmt_spec *print)
627 {
628   struct variable *ov = var_clone (v);
629   var_set_print_format_quiet (v, print);
630   dict_var_changed (v, VAR_TRAIT_PRINT_FORMAT, ov);
631 }
632
633 /* Returns V's write format specification. */
634 const struct fmt_spec *
635 var_get_write_format (const struct variable *v)
636 {
637   return &v->write;
638 }
639
640 /* Sets V's write format specification to WRITE, which must be a
641    valid format specification for a variable of V's width
642    (ordinarily an output format, but input formats are not
643    rejected). */
644 static void
645 var_set_write_format_quiet (struct variable *v, const struct fmt_spec *write)
646 {
647   if (!fmt_equal (&v->write, write))
648     {
649       assert (fmt_check_width_compat (write, v->width));
650       v->write = *write;
651     }
652 }
653
654 /* Sets V's write format specification to WRITE, which must be a
655    valid format specification for a variable of V's width
656    (ordinarily an output format, but input formats are not
657    rejected). */
658 void
659 var_set_write_format (struct variable *v, const struct fmt_spec *write)
660 {
661   struct variable *ov = var_clone (v);
662   var_set_write_format_quiet (v, write);
663   dict_var_changed (v, VAR_TRAIT_WRITE_FORMAT, ov);
664 }
665
666
667 /* Sets V's print and write format specifications to FORMAT,
668    which must be a valid format specification for a variable of
669    V's width (ordinarily an output format, but input formats are
670    not rejected). */
671 void
672 var_set_both_formats (struct variable *v, const struct fmt_spec *format)
673 {
674   struct variable *ov = var_clone (v);
675   var_set_print_format_quiet (v, format);
676   var_set_write_format_quiet (v, format);
677   dict_var_changed (v, VAR_TRAIT_PRINT_FORMAT | VAR_TRAIT_WRITE_FORMAT, ov);
678 }
679
680 /* Returns the default print and write format for a variable of
681    the given TYPE, as set by var_create.  The return value can be
682    used to reset a variable's print and write formats to the
683    default. */
684 struct fmt_spec
685 var_default_formats (int width)
686 {
687   return (width == 0
688           ? fmt_for_output (FMT_F, 8, 2)
689           : fmt_for_output (FMT_A, width, 0));
690 }
691
692
693 \f
694
695 /* Update the combined name and label string if necessary */
696 static void
697 update_vl_string (const struct variable *v)
698 {
699   /* Cast away const! */
700   struct string *str = (struct string *) &v->name_and_label;
701
702   if (ds_is_empty (str))
703     {
704       if (v->label)
705         ds_put_format (str, _("%s (%s)"), v->label, v->name);
706       else
707         ds_put_cstr (str, v->name);
708     }
709 }
710
711
712 /* Return a string representing this variable, in the form most
713    appropriate from a human factors perspective, that is, its
714    variable label if it has one, otherwise its name. */
715 const char *
716 var_to_string (const struct variable *v)
717 {
718   switch (settings_get_show_variables ())
719     {
720     case SETTINGS_VALUE_SHOW_VALUE:
721       return v->name;
722
723     case SETTINGS_VALUE_SHOW_LABEL:
724     default:
725       return v->label != NULL ? v->label : v->name;
726
727     case SETTINGS_VALUE_SHOW_BOTH:
728       update_vl_string (v);
729       return ds_cstr (&v->name_and_label);
730     }
731 }
732
733 /* Returns V's variable label, or a null pointer if it has none. */
734 const char *
735 var_get_label (const struct variable *v)
736 {
737   return v->label;
738 }
739
740 /* Sets V's variable label to UTF-8 encoded string LABEL, stripping off leading
741    and trailing white space.  If LABEL is a null pointer or if LABEL is an
742    empty string (after stripping white space), then V's variable label (if any)
743    is removed. */
744 static void
745 var_set_label_quiet (struct variable *v, const char *label)
746 {
747   free (v->label);
748   v->label = NULL;
749
750   if (label != NULL && label[strspn (label, CC_SPACES)])
751     v->label = xstrdup (label);
752
753   ds_destroy (&v->name_and_label);
754   ds_init_empty (&v->name_and_label);
755 }
756
757
758
759 /* Sets V's variable label to UTF-8 encoded string LABEL, stripping off leading
760    and trailing white space.  If LABEL is a null pointer or if LABEL is an
761    empty string (after stripping white space), then V's variable label (if any)
762    is removed. */
763 void
764 var_set_label (struct variable *v, const char *label)
765 {
766   struct variable *ov = var_clone (v);
767   var_set_label_quiet (v, label);
768   dict_var_changed (v, VAR_TRAIT_LABEL, ov);
769 }
770
771
772 /* Removes any variable label from V. */
773 void
774 var_clear_label (struct variable *v)
775 {
776   var_set_label (v, NULL);
777 }
778
779 /* Returns true if V has a variable V,
780    false otherwise. */
781 bool
782 var_has_label (const struct variable *v)
783 {
784   return v->label != NULL;
785 }
786 \f
787 /* Returns true if M is a valid variable measurement level,
788    false otherwise. */
789 bool
790 measure_is_valid (enum measure m)
791 {
792   return m == MEASURE_NOMINAL || m == MEASURE_ORDINAL || m == MEASURE_SCALE;
793 }
794
795 /* Returns a string version of measurement level M, for display to a user.
796    The caller may translate the string by passing it to gettext(). */
797 const char *
798 measure_to_string (enum measure m)
799 {
800   assert (m == measure[m].value);
801   return measure[m].label;
802 }
803
804 /* Returns a string version of measurement level M, for use in PSPP command
805    syntax. */
806 const char *
807 measure_to_syntax (enum measure m)
808 {
809   switch (m)
810     {
811     case MEASURE_NOMINAL:
812       return "NOMINAL";
813
814     case MEASURE_ORDINAL:
815       return "ORDINAL";
816
817     case MEASURE_SCALE:
818       return "SCALE";
819
820     default:
821       return "Invalid";
822     }
823 }
824
825 /* Returns V's measurement level. */
826 enum measure
827 var_get_measure (const struct variable *v)
828 {
829   return v->measure;
830 }
831
832 /* Sets V's measurement level to MEASURE. */
833 static void
834 var_set_measure_quiet (struct variable *v, enum measure measure)
835 {
836   assert (measure_is_valid (measure));
837   v->measure = measure;
838 }
839
840
841 /* Sets V's measurement level to MEASURE. */
842 void
843 var_set_measure (struct variable *v, enum measure measure)
844 {
845   struct variable *ov = var_clone (v);
846   var_set_measure_quiet (v, measure);
847   dict_var_changed (v, VAR_TRAIT_MEASURE, ov);
848 }
849
850
851 /* Returns the default measurement level for a variable of the
852    given TYPE, as set by var_create.  The return value can be
853    used to reset a variable's measurement level to the
854    default. */
855 enum measure
856 var_default_measure (enum val_type type)
857 {
858   return type == VAL_NUMERIC ? MEASURE_SCALE : MEASURE_NOMINAL;
859 }
860 \f
861 /* Returns true if M is a valid variable role,
862    false otherwise. */
863 bool
864 var_role_is_valid (enum var_role role)
865 {
866   switch (role)
867     {
868     case ROLE_NONE:
869     case ROLE_INPUT:
870     case ROLE_TARGET:
871     case ROLE_BOTH:
872     case ROLE_PARTITION:
873     case ROLE_SPLIT:
874       return true;
875
876     default:
877       return false;
878     }
879 }
880
881 /* Returns a string version of ROLE, for display to a user.
882    The caller may translate the string by passing it to gettext(). */
883 const char *
884 var_role_to_string (enum var_role r)
885 {
886   assert (r == role[r].value);
887   return role[r].label;
888 }
889
890 /* Returns a string version of ROLE, for use in PSPP comamnd syntax. */
891 const char *
892 var_role_to_syntax (enum var_role role)
893 {
894   switch (role)
895     {
896     case ROLE_INPUT:
897       return "INPUT";
898
899     case ROLE_TARGET:
900       return "TARGET";
901
902     case ROLE_BOTH:
903       return "BOTH";
904
905     case ROLE_NONE:
906       return "NONE";
907
908     case ROLE_PARTITION:
909       return "PARTITION";
910
911     case ROLE_SPLIT:
912       return "SPLIT";
913
914     default:
915       return "<invalid>";
916     }
917 }
918
919 /* Returns V's role. */
920 enum var_role
921 var_get_role (const struct variable *v)
922 {
923   return v->role;
924 }
925
926 /* Sets V's role to ROLE. */
927 static void
928 var_set_role_quiet (struct variable *v, enum var_role role)
929 {
930   assert (var_role_is_valid (role));
931   v->role = role;
932 }
933
934
935 /* Sets V's role to ROLE. */
936 void
937 var_set_role (struct variable *v, enum var_role role)
938 {
939   struct variable *ov = var_clone (v);
940   var_set_role_quiet (v, role);
941   dict_var_changed (v, VAR_TRAIT_ROLE, ov);
942 }
943 \f
944 /* Returns V's display width, which applies only to GUIs. */
945 int
946 var_get_display_width (const struct variable *v)
947 {
948   return v->display_width;
949 }
950
951 /* Sets V's display width to DISPLAY_WIDTH. */
952 static void
953 var_set_display_width_quiet (struct variable *v, int new_width)
954 {
955   if (v->display_width != new_width)
956     {
957       v->display_width = new_width;
958     }
959 }
960
961 void
962 var_set_display_width (struct variable *v, int new_width)
963 {
964   if (v->display_width != new_width)
965     {
966       struct variable *ov = var_clone (v);
967       var_set_display_width_quiet (v, new_width);
968       dict_var_changed (v, VAR_TRAIT_DISPLAY_WIDTH, ov);
969     }
970 }
971
972 /* Returns the default display width for a variable of the given
973    WIDTH, as set by var_create.  The return value can be used to
974    reset a variable's display width to the default. */
975 int
976 var_default_display_width (int width)
977 {
978   return width == 0 ? 8 : MIN (width, 32);
979 }
980 \f
981 /* Returns true if A is a valid alignment,
982    false otherwise. */
983 bool
984 alignment_is_valid (enum alignment a)
985 {
986   return a == ALIGN_LEFT || a == ALIGN_RIGHT || a == ALIGN_CENTRE;
987 }
988
989 /* Returns a string version of alignment A, for display to a user.
990    The caller may translate the string by passing it to gettext(). */
991 const char *
992 alignment_to_string (enum alignment a)
993 {
994   assert (a == align[a].value);
995   return align[a].label;
996 }
997
998 /* Returns a string version of alignment A, for use in PSPP command syntax. */
999 const char *
1000 alignment_to_syntax (enum alignment a)
1001 {
1002   switch (a)
1003     {
1004     case ALIGN_LEFT:
1005       return "LEFT";
1006
1007     case ALIGN_RIGHT:
1008       return "RIGHT";
1009
1010     case ALIGN_CENTRE:
1011       return "CENTER";
1012
1013     default:
1014       return "Invalid";
1015     }
1016 }
1017
1018 /* Returns V's display alignment, which applies only to GUIs. */
1019 enum alignment
1020 var_get_alignment (const struct variable *v)
1021 {
1022   return v->alignment;
1023 }
1024
1025 /* Sets V's display alignment to ALIGNMENT. */
1026 static void
1027 var_set_alignment_quiet (struct variable *v, enum alignment alignment)
1028 {
1029   assert (alignment_is_valid (alignment));
1030   v->alignment = alignment;
1031 }
1032
1033 /* Sets V's display alignment to ALIGNMENT. */
1034 void
1035 var_set_alignment (struct variable *v, enum alignment alignment)
1036 {
1037   struct variable *ov = var_clone (v);
1038   var_set_alignment_quiet (v, alignment);
1039   dict_var_changed (v, VAR_TRAIT_ALIGNMENT, ov);
1040 }
1041
1042
1043 /* Returns the default display alignment for a variable of the
1044    given TYPE, as set by var_create.  The return value can be
1045    used to reset a variable's display alignment to the default. */
1046 enum alignment
1047 var_default_alignment (enum val_type type)
1048 {
1049   return type == VAL_NUMERIC ? ALIGN_RIGHT : ALIGN_LEFT;
1050 }
1051 \f
1052 /* Whether variables' values should be preserved from case to
1053    case. */
1054
1055 /* Returns true if variable V's value should be left from case to
1056    case, instead of being reset to system-missing or blanks. */
1057 bool
1058 var_get_leave (const struct variable *v)
1059 {
1060   return v->leave;
1061 }
1062
1063 /* Sets V's leave setting to LEAVE. */
1064 static void
1065 var_set_leave_quiet (struct variable *v, bool leave)
1066 {
1067   assert (leave || !var_must_leave (v));
1068   v->leave = leave;
1069 }
1070
1071
1072 /* Sets V's leave setting to LEAVE. */
1073 void
1074 var_set_leave (struct variable *v, bool leave)
1075 {
1076   struct variable *ov = var_clone (v);
1077   var_set_leave_quiet (v, leave);
1078   dict_var_changed (v, VAR_TRAIT_LEAVE, ov);
1079 }
1080
1081
1082 /* Returns true if V must be left from case to case,
1083    false if it can be set either way. */
1084 bool
1085 var_must_leave (const struct variable *v)
1086 {
1087   return var_get_dict_class (v) == DC_SCRATCH;
1088 }
1089 \f
1090 /* Returns the number of short names stored in VAR.
1091
1092    Short names are used only for system and portable file input
1093    and output.  They are upper-case only, not necessarily unique,
1094    and limited to SHORT_NAME_LEN characters (plus a null
1095    terminator).  Ordinarily a variable has at most one short
1096    name, but very long string variables (longer than 255 bytes)
1097    may have more.  A variable might not have any short name at
1098    all if it hasn't been saved to or read from a system or
1099    portable file. */
1100 size_t
1101 var_get_short_name_cnt (const struct variable *var)
1102 {
1103   return var->short_name_cnt;
1104 }
1105
1106 /* Returns VAR's short name with the given IDX, if it has one
1107    with that index, or a null pointer otherwise.  Short names may
1108    be sparse: even if IDX is less than the number of short names
1109    in VAR, this function may return a null pointer. */
1110 const char *
1111 var_get_short_name (const struct variable *var, size_t idx)
1112 {
1113   return idx < var->short_name_cnt ? var->short_names[idx] : NULL;
1114 }
1115
1116 /* Sets VAR's short name with the given IDX to the UTF-8 string SHORT_NAME.
1117    The caller must already have checked that, in the dictionary encoding,
1118    SHORT_NAME is no more than SHORT_NAME_LEN bytes long.  The new short name
1119    will be converted to uppercase.
1120
1121    Specifying a null pointer for SHORT_NAME clears the specified short name. */
1122 void
1123 var_set_short_name (struct variable *var, size_t idx, const char *short_name)
1124 {
1125   struct variable *ov = var_clone (var);
1126
1127   /* Clear old short name numbered IDX, if any. */
1128   if (idx < var->short_name_cnt)
1129     {
1130       free (var->short_names[idx]);
1131       var->short_names[idx] = NULL;
1132     }
1133
1134   /* Install new short name for IDX. */
1135   if (short_name != NULL)
1136     {
1137       if (idx >= var->short_name_cnt)
1138         {
1139           size_t old_cnt = var->short_name_cnt;
1140           size_t i;
1141           var->short_name_cnt = MAX (idx * 2, 1);
1142           var->short_names = xnrealloc (var->short_names, var->short_name_cnt,
1143                                         sizeof *var->short_names);
1144           for (i = old_cnt; i < var->short_name_cnt; i++)
1145             var->short_names[i] = NULL;
1146         }
1147       var->short_names[idx] = utf8_to_upper (short_name);
1148     }
1149
1150   dict_var_changed (var, VAR_TRAIT_NAME, ov);
1151 }
1152
1153 /* Clears V's short names. */
1154 void
1155 var_clear_short_names (struct variable *v)
1156 {
1157   size_t i;
1158
1159   for (i = 0; i < v->short_name_cnt; i++)
1160     free (v->short_names[i]);
1161   free (v->short_names);
1162   v->short_names = NULL;
1163   v->short_name_cnt = 0;
1164 }
1165 \f
1166 /* Relationship with dictionary. */
1167
1168 /* Returns V's index within its dictionary, the value
1169    for which "dict_get_var (dict, index)" will return V.
1170    V must be in a dictionary. */
1171 size_t
1172 var_get_dict_index (const struct variable *v)
1173 {
1174   assert (var_has_vardict (v));
1175   return vardict_get_dict_index (v->vardict);
1176 }
1177
1178 /* Returns V's index within the case represented by its
1179    dictionary, that is, the value for which "case_data_idx (case,
1180    index)" will return the data for V in that case.
1181    V must be in a dictionary. */
1182 size_t
1183 var_get_case_index (const struct variable *v)
1184 {
1185   assert (var_has_vardict (v));
1186   return vardict_get_case_index (v->vardict);
1187 }
1188 \f
1189 /* Returns variable V's attribute set.  The caller may examine or
1190    modify the attribute set, but must not destroy it.  Destroying
1191    V, or calling var_set_attributes() on V, will also destroy its
1192    attribute set. */
1193 struct attrset *
1194 var_get_attributes (const struct variable *v)
1195 {
1196   return CONST_CAST (struct attrset *, &v->attributes);
1197 }
1198
1199 /* Replaces variable V's attributes set by a copy of ATTRS. */
1200 static void
1201 var_set_attributes_quiet (struct variable *v, const struct attrset *attrs)
1202 {
1203   attrset_destroy (&v->attributes);
1204   attrset_clone (&v->attributes, attrs);
1205 }
1206
1207 /* Replaces variable V's attributes set by a copy of ATTRS. */
1208 void
1209 var_set_attributes (struct variable *v, const struct attrset *attrs)
1210 {
1211   struct variable *ov = var_clone (v);
1212   var_set_attributes_quiet (v, attrs);
1213   dict_var_changed (v, VAR_TRAIT_ATTRIBUTES, ov);
1214 }
1215
1216
1217 /* Returns true if V has any custom attributes, false if it has none. */
1218 bool
1219 var_has_attributes (const struct variable *v)
1220 {
1221   return attrset_count (&v->attributes) > 0;
1222 }
1223 \f
1224
1225 /* Creates and returns a clone of OLD_VAR.  Most properties of
1226    the new variable are copied from OLD_VAR, except:
1227
1228     - The variable's short name is not copied, because there is
1229       no reason to give a new variable with potentially a new
1230       name the same short name.
1231
1232     - The new variable is not added to OLD_VAR's dictionary by
1233       default.  Use dict_clone_var, instead, to do that.
1234 */
1235 struct variable *
1236 var_clone (const struct variable *old_var)
1237 {
1238   struct variable *new_var = var_create (var_get_name (old_var),
1239                                          var_get_width (old_var));
1240
1241   var_set_missing_values_quiet (new_var, var_get_missing_values (old_var));
1242   var_set_print_format_quiet (new_var, var_get_print_format (old_var));
1243   var_set_write_format_quiet (new_var, var_get_write_format (old_var));
1244   var_set_value_labels_quiet (new_var, var_get_value_labels (old_var));
1245   var_set_label_quiet (new_var, var_get_label (old_var));
1246   var_set_measure_quiet (new_var, var_get_measure (old_var));
1247   var_set_role_quiet (new_var, var_get_role (old_var));
1248   var_set_display_width_quiet (new_var, var_get_display_width (old_var));
1249   var_set_alignment_quiet (new_var, var_get_alignment (old_var));
1250   var_set_leave_quiet (new_var, var_get_leave (old_var));
1251   var_set_attributes_quiet (new_var, var_get_attributes (old_var));
1252
1253   return new_var;
1254 }
1255
1256
1257
1258 /* Returns the encoding of values of variable VAR.  (This is actually a
1259    property of the dictionary.)  Returns null if no specific encoding has been
1260    set.  */
1261 const char *
1262 var_get_encoding (const struct variable *var)
1263 {
1264   return (var_has_vardict (var)
1265           ? dict_get_encoding (vardict_get_dictionary (var->vardict))
1266           : NULL);
1267 }
1268 \f
1269 /* Returns V's vardict structure. */
1270 struct vardict_info *
1271 var_get_vardict (const struct variable *v)
1272 {
1273   return CONST_CAST (struct vardict_info *, v->vardict);
1274 }
1275
1276 /* Sets V's vardict data to VARDICT. */
1277 void
1278 var_set_vardict (struct variable *v, struct vardict_info *vardict)
1279 {
1280   v->vardict = vardict;
1281 }
1282
1283 /* Returns true if V has vardict data. */
1284 bool
1285 var_has_vardict (const struct variable *v)
1286 {
1287   return v->vardict != NULL;
1288 }
1289
1290 /* Clears V's vardict data. */
1291 void
1292 var_clear_vardict (struct variable *v)
1293 {
1294   v->vardict = NULL;
1295 }
1296
1297 \f
1298 /*
1299   Returns zero, if W is a missing value for WV or if it is less than zero.
1300   Typically used to force a numerical value into a valid weight.
1301
1302   As a side effect, this function will emit a warning if the value
1303   WARN_ON_INVALID points to a bool which is TRUE.  That bool will be then
1304   set to FALSE.
1305  */
1306 double
1307 var_force_valid_weight (const struct variable *wv, double w, bool *warn_on_invalid)
1308 {
1309   if (w < 0.0 || (wv && var_is_num_missing (wv, w, MV_ANY)))
1310     w = 0.0;
1311
1312   if (w == 0.0 && warn_on_invalid != NULL && *warn_on_invalid)
1313     {
1314       *warn_on_invalid = false;
1315       msg (SW, _("At least one case in the data file had a weight value "
1316                  "that was user-missing, system-missing, zero, or "
1317                  "negative.  These case(s) were ignored."));
1318     }
1319
1320   return w;
1321 }