Don't update categorical variables whose values are missing
authorJohn Darrington <john@darrington.wattle.id.au>
Sat, 24 Oct 2009 14:14:59 +0000 (16:14 +0200)
committerJohn Darrington <john@darrington.wattle.id.au>
Sat, 24 Oct 2009 14:14:59 +0000 (16:14 +0200)
src/math/categoricals.c
src/math/categoricals.h
src/math/covariance.c

index 4b5176322f798212073ffc6fab95e312789acf92..19b6e3f11907dec4f8e92a43d38d1c8dc7c7182f 100644 (file)
@@ -74,6 +74,9 @@ struct categoricals
   size_t n_cats_total;
 
   struct pool *pool;
+
+  /* Missing values to be excluded */
+  enum mv_class exclude;
 };
 
 
@@ -98,7 +101,6 @@ categoricals_dump (const struct categoricals *cat)
     {
       const struct var_params *vp = &cat->vp[v];
       const struct hmap *m = &vp->map;
-      //      size_t width = var_get_width (vp->var);
       struct hmap_node *node ;
       int x;
      
@@ -155,7 +157,8 @@ lookup_value (const struct hmap *map, const struct variable *var, const union va
 
 
 struct categoricals *
-categoricals_create (const struct variable **v, size_t n_vars, const struct variable *wv)
+categoricals_create (const struct variable **v, size_t n_vars,
+                    const struct variable *wv, enum mv_class exclude)
 {
   size_t i;
   struct categoricals *cat = xmalloc (sizeof *cat);
@@ -165,6 +168,7 @@ categoricals_create (const struct variable **v, size_t n_vars, const struct vari
   cat->n_cats_total = 0;
   cat->reverse_variable_map = NULL;
   cat->pool = pool_create ();
+  cat->exclude = exclude;
 
   cat->vp = pool_calloc (cat->pool, n_vars, sizeof *cat->vp);
 
@@ -193,10 +197,14 @@ categoricals_update (struct categoricals *cat, const struct ccase *c)
       const struct variable *var = cat->vp[i].var;
       unsigned int width = var_get_width (var);
       const union value *val = case_data (c, var);
-      size_t hash = value_hash (val, width, 0);
+      size_t hash;
+      struct value_node *node ;
 
-      struct value_node  *node = lookup_value (&cat->vp[i].map, var, val);
+      if ( var_is_value_missing (var, val, cat->exclude))
+       continue;
 
+      hash = value_hash (val, width, 0);
+      node = lookup_value (&cat->vp[i].map, var, val);
 
       if ( NULL == node)
        {
@@ -309,7 +317,6 @@ categoricals_get_value_by_subscript (const struct categoricals *cat, int subscri
   return &vn->value;
 }
 
-
 /* Returns unity if the value in case C at SUBSCRIPT is equal to the category
    for that subscript */
 double
index 619135a3393ef05afd213d480ee6c9c38f5a21e2..2cec0b45cd3822ebbc6d7aff70ec34bf4b7ca530 100644 (file)
@@ -19,6 +19,7 @@
 #define _CATEGORICALS__
 
 #include <stddef.h>
+#include <data/missing-values.h>
 
 struct categoricals;
 struct variable;
@@ -27,7 +28,7 @@ struct ccase;
 union value ;
 
 struct categoricals *categoricals_create (const struct variable **v, size_t n_vars,
-                                         const struct variable *wv);
+                                         const struct variable *wv, enum mv_class exclude);
 
 void categoricals_destroy (struct categoricals *);
 
index 7e9736291c4a32e81cad37b0a6fac7aa902f5b26..dbcf4f65efb8d8b5c586c3e90afb61b73327da33 100644 (file)
@@ -195,7 +195,7 @@ covariance_2pass_create (size_t n_vars, const struct variable **vars,
   cov->n_cm = - 1;
   cov->cm = NULL;
 
-  cov->categoricals = categoricals_create (catvars, n_catvars, wv);
+  cov->categoricals = categoricals_create (catvars, n_catvars, wv, exclude);
 
   return cov;
 }