Fixed some memory leaks
[pspp] / src / data / ods-reader.c
1 /* PSPP - a program for statistical analysis.
2    Copyright (C) 2011, 2012, 2013 Free Software Foundation, Inc.
3
4    This program is free software: you can redistribute it and/or modify
5    it under the terms of the GNU General Public License as published by
6    the Free Software Foundation, either version 3 of the License, or
7    (at your option) any later version.
8
9    This program is distributed in the hope that it will be useful,
10    but WITHOUT ANY WARRANTY; without even the implied warranty of
11    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12    GNU General Public License for more details.
13
14    You should have received a copy of the GNU General Public License
15    along with this program.  If not, see <http://www.gnu.org/licenses/>. */
16
17 #include <config.h>
18
19 #include "libpspp/message.h"
20 #include "libpspp/misc.h"
21 #include "libpspp/assertion.h"
22
23 #include "data/data-in.h"
24
25 #include "gl/c-strtod.h"
26 #include "gl/minmax.h"
27
28 #include "gettext.h"
29 #define _(msgid) gettext (msgid)
30 #define N_(msgid) (msgid)
31
32 #include "ods-reader.h"
33 #include "spreadsheet-reader.h"
34
35 #if !ODF_READ_SUPPORT
36
37 struct casereader *
38 ods_open_reader (const struct spreadsheet_read_options *opts, 
39                  struct dictionary **dict)
40 {
41   msg (ME, _("Support for %s files was not compiled into this installation of PSPP"), "OpenDocument");
42
43   return NULL;
44 }
45
46 #else
47
48 #include "libpspp/zip-reader.h"
49
50
51 #include <assert.h>
52 #include <stdbool.h>
53 #include <errno.h>
54 #include <libxml/xmlreader.h>
55 #include <zlib.h>
56
57 #include "data/format.h"
58 #include "data/case.h"
59 #include "data/casereader-provider.h"
60 #include "data/dictionary.h"
61 #include "data/identifier.h"
62 #include "data/value.h"
63 #include "data/variable.h"
64 #include "libpspp/i18n.h"
65 #include "libpspp/str.h"
66
67 #include "gl/xalloc.h"
68
69 static void ods_file_casereader_destroy (struct casereader *, void *);
70 static struct ccase *ods_file_casereader_read (struct casereader *, void *);
71
72
73 static const struct casereader_class ods_file_casereader_class =
74   {
75     ods_file_casereader_read,
76     ods_file_casereader_destroy,
77     NULL,
78     NULL,
79   };
80
81 struct sheet_detail
82 {
83   /* The name of the sheet (utf8 encoding) */
84   char *name;
85
86   int start_col;
87   int stop_col;
88   int start_row;
89   int stop_row;
90 };
91
92
93 enum reader_state
94   {
95     STATE_INIT = 0,        /* Initial state */
96     STATE_SPREADSHEET,     /* Found the start of the spreadsheet doc */
97     STATE_TABLE,           /* Found the sheet that we actually want */
98     STATE_ROW,             /* Found the start of the cell array */
99     STATE_CELL,            /* Found a cell */
100     STATE_CELL_CONTENT     /* Found a the text within a cell */
101   };
102
103 struct state_data
104 {
105   xmlTextReaderPtr xtr;
106   int node_type;
107   enum reader_state state;
108   int row;
109   int col;
110   int current_sheet;
111   xmlChar *current_sheet_name;
112
113   int col_span;
114 };
115
116 static void
117 state_data_destroy (struct state_data *sd)
118 {
119   xmlFree (sd->current_sheet_name);
120   xmlFreeTextReader (sd->xtr);
121 }
122
123 struct ods_reader
124 {
125   struct spreadsheet spreadsheet;
126   struct zip_reader *zreader;
127   int ref_cnt;
128   int target_sheet_index;
129   xmlChar *target_sheet_name;
130   
131   struct state_data foo;
132   struct state_data rsd;
133
134   int start_row;
135   int start_col;
136   int stop_row;
137   int stop_col;
138
139   struct sheet_detail *sheets;
140   int n_allocated_sheets;
141
142   struct caseproto *proto;
143   struct dictionary *dict;
144   struct ccase *first_case;
145   bool used_first_case;
146   bool read_names;
147
148   struct string ods_errs;
149 };
150
151 void
152 ods_destroy (struct spreadsheet *s)
153 {
154   struct ods_reader *r = (struct ods_reader *) s;
155
156   if (--r->ref_cnt == 0)
157     {
158       int i;
159
160       state_data_destroy (&r->foo);
161       for (i = 0; i < r->n_allocated_sheets; ++i)
162         {
163           xmlFree (r->sheets[i].name);
164         }
165         
166       zip_reader_destroy (r->zreader);
167       free (r->sheets);
168         
169       free (r);
170     }
171 }
172
173
174
175 static bool
176 reading_target_sheet (const struct ods_reader *r, const struct state_data *foo)
177 {
178   if (r->target_sheet_name != NULL)
179     {
180       if ( 0 == xmlStrcmp (r->target_sheet_name, foo->current_sheet_name))
181         return true;
182     }
183   
184   if (r->target_sheet_index == foo->current_sheet + 1)
185     return true;
186
187   return false;
188 }
189
190
191 static void process_node (struct ods_reader *or, struct state_data *r);
192
193
194 const char *
195 ods_get_sheet_name (struct spreadsheet *s, int n)
196 {
197   struct ods_reader *r = (struct ods_reader *) s;
198   struct state_data *or = &r->foo;
199
200   assert (n < s->n_sheets);
201
202   while ( 
203           (r->n_allocated_sheets <= n)
204           || or->state != STATE_SPREADSHEET
205           )
206     {
207       int ret = xmlTextReaderRead (or->xtr);
208       if ( ret != 1)
209         break;
210
211       process_node (r, or);
212     }
213
214   return r->sheets[n].name;
215 }
216
217 char *
218 ods_get_sheet_range (struct spreadsheet *s, int n)
219 {
220   struct ods_reader *r = (struct ods_reader *) s;
221   struct state_data *or = &r->foo;
222   
223   assert (n < s->n_sheets);
224
225   while ( 
226           (r->n_allocated_sheets <= n)
227           || (r->sheets[n].stop_row == -1) 
228           || or->state != STATE_SPREADSHEET
229           )
230     {
231       int ret = xmlTextReaderRead (or->xtr);
232       if ( ret != 1)
233         break;
234
235       process_node (r, or);
236     }
237
238   return create_cell_ref (
239                           r->sheets[n].start_col,
240                           r->sheets[n].start_row,
241                           r->sheets[n].stop_col,
242                           r->sheets[n].stop_row);
243 }
244
245
246 static void
247 ods_file_casereader_destroy (struct casereader *reader UNUSED, void *r_)
248 {
249   struct ods_reader *r = r_;
250   if ( r == NULL)
251     return ;
252
253   state_data_destroy (&r->rsd);
254
255   if ( ! ds_is_empty (&r->ods_errs))
256     msg (ME, "%s", ds_cstr (&r->ods_errs));
257
258   ds_destroy (&r->ods_errs);
259
260   if ( ! r->used_first_case )
261     case_unref (r->first_case);
262
263   caseproto_unref (r->proto);
264
265   xmlFree (r->target_sheet_name);
266
267   ods_destroy (&r->spreadsheet);
268 }
269
270
271
272
273
274 static void
275 process_node (struct ods_reader *or, struct state_data *r)
276 {
277   xmlChar *name = xmlTextReaderName (r->xtr);
278   if (name == NULL)
279     name = xmlStrdup (_xml ("--"));
280
281
282   r->node_type = xmlTextReaderNodeType (r->xtr);
283
284   switch (r->state)
285     {
286     case STATE_INIT:
287       if (0 == xmlStrcasecmp (name, _xml("office:spreadsheet")) &&
288           XML_READER_TYPE_ELEMENT  == r->node_type)
289         {
290           r->state = STATE_SPREADSHEET;
291           r->current_sheet = -1;
292           r->current_sheet_name = NULL;
293         }
294       break;
295     case STATE_SPREADSHEET:
296       if (0 == xmlStrcasecmp (name, _xml("table:table"))
297           && 
298           (XML_READER_TYPE_ELEMENT == r->node_type))
299         {
300           xmlFree (r->current_sheet_name);
301           r->current_sheet_name = xmlTextReaderGetAttribute (r->xtr, _xml ("table:name"));
302
303           ++r->current_sheet;
304
305           if (r->current_sheet >= or->n_allocated_sheets)
306             {
307               assert (r->current_sheet == or->n_allocated_sheets);
308               or->sheets = xrealloc (or->sheets, sizeof (*or->sheets) * ++or->n_allocated_sheets);
309               or->sheets[or->n_allocated_sheets - 1].start_col = -1;
310               or->sheets[or->n_allocated_sheets - 1].stop_col = -1;
311               or->sheets[or->n_allocated_sheets - 1].start_row = -1;
312               or->sheets[or->n_allocated_sheets - 1].stop_row = -1;
313               or->sheets[or->n_allocated_sheets - 1].name = CHAR_CAST (char *, xmlStrdup (r->current_sheet_name));
314             }
315
316           r->col = 0;
317           r->row = 0;
318
319           r->state = STATE_TABLE;
320         }
321       else if (0 == xmlStrcasecmp (name, _xml("office:spreadsheet")) &&
322                XML_READER_TYPE_ELEMENT  == r->node_type)
323         {
324           r->state = STATE_INIT;
325         }
326       break;
327     case STATE_TABLE:
328       if (0 == xmlStrcasecmp (name, _xml("table:table-row")) && 
329           (XML_READER_TYPE_ELEMENT  == r->node_type))
330         {
331           xmlChar *value =
332             xmlTextReaderGetAttribute (r->xtr,
333                                        _xml ("table:number-rows-repeated"));
334           
335           int row_span = value ? _xmlchar_to_int (value) : 1;
336
337           r->row += row_span;
338           r->col = 0;
339           
340           if (! xmlTextReaderIsEmptyElement (r->xtr))
341             r->state = STATE_ROW;
342
343           xmlFree (value);
344         }
345       else if (0 == xmlStrcasecmp (name, _xml("table:table")) && 
346                (XML_READER_TYPE_END_ELEMENT  == r->node_type))
347         {
348           r->state = STATE_SPREADSHEET;
349         }
350       break;
351     case STATE_ROW:
352       if ( (0 == xmlStrcasecmp (name, _xml ("table:table-cell")))
353            && 
354            (XML_READER_TYPE_ELEMENT  == r->node_type))
355         {
356           xmlChar *value =
357             xmlTextReaderGetAttribute (r->xtr,
358                                        _xml ("table:number-columns-repeated"));
359           
360           r->col_span = value ? _xmlchar_to_int (value) : 1;
361           r->col += r->col_span;
362
363           if (! xmlTextReaderIsEmptyElement (r->xtr))
364             r->state = STATE_CELL;
365
366           xmlFree (value);
367         }
368       else if ( (0 == xmlStrcasecmp (name, _xml ("table:table-row")))
369                 &&
370                 (XML_READER_TYPE_END_ELEMENT  == r->node_type))
371         {
372           r->state = STATE_TABLE;
373         }
374       break;
375     case STATE_CELL:
376       if ( (0 == xmlStrcasecmp (name, _xml("text:p")))
377             &&
378            ( XML_READER_TYPE_ELEMENT  == r->node_type))
379         {
380           if (! xmlTextReaderIsEmptyElement (r->xtr))
381             r->state = STATE_CELL_CONTENT;
382         }
383       else if
384         ( (0 == xmlStrcasecmp (name, _xml("table:table-cell")))
385           &&
386           (XML_READER_TYPE_END_ELEMENT  == r->node_type)
387           )
388         {
389           r->state = STATE_ROW;
390         }
391       break;
392     case STATE_CELL_CONTENT:
393       assert (r->current_sheet >= 0);
394       assert (r->current_sheet < or->n_allocated_sheets);
395
396       if (or->sheets[r->current_sheet].start_row == -1)
397         or->sheets[r->current_sheet].start_row = r->row - 1;
398
399       if ( 
400           (or->sheets[r->current_sheet].start_col == -1)
401           ||
402           (or->sheets[r->current_sheet].start_col >= r->col - 1)
403            )
404         or->sheets[r->current_sheet].start_col = r->col - 1;
405
406       or->sheets[r->current_sheet].stop_row = r->row - 1;
407
408       if ( or->sheets[r->current_sheet].stop_col <  r->col - 1)
409         or->sheets[r->current_sheet].stop_col = r->col - 1;
410
411       if (XML_READER_TYPE_END_ELEMENT  == r->node_type)
412         r->state = STATE_CELL;
413       break;
414     default:
415       NOT_REACHED ();
416       break;
417     };
418
419   xmlFree (name);
420 }
421
422 /* 
423    A struct containing the parameters of a cell's value 
424    parsed from the xml
425 */
426 struct xml_value
427 {
428   xmlChar *type;
429   xmlChar *value;
430   xmlChar *text;
431 };
432
433 struct var_spec
434 {
435   char *name;
436   struct xml_value firstval;
437 };
438
439
440 /* Determine the width that a xmv should probably have */
441 static int
442 xmv_to_width (const struct xml_value *xmv, int fallback)
443 {
444   int width = SPREADSHEET_DEFAULT_WIDTH;
445
446   /* Non-strings always have zero width */
447   if (xmv->type != NULL && 0 != xmlStrcmp (xmv->type, _xml("string")))
448     return 0;
449
450   if ( fallback != -1)
451     return fallback;
452
453   if ( xmv->value )
454     width = ROUND_UP (xmlStrlen (xmv->value),
455                       SPREADSHEET_DEFAULT_WIDTH);
456   else if ( xmv->text)
457     width = ROUND_UP (xmlStrlen (xmv->text),
458                       SPREADSHEET_DEFAULT_WIDTH);
459
460   return width;
461 }
462
463 /*
464    Sets the VAR of case C, to the value corresponding to the xml data
465  */
466 static void
467 convert_xml_to_value (struct ccase *c, const struct variable *var,
468                       const struct xml_value *xmv)
469 {
470   union value *v = case_data_rw (c, var);
471
472   if (xmv->value == NULL && xmv->text == NULL)
473     value_set_missing (v, var_get_width (var));
474   else if ( var_is_alpha (var))
475     /* Use the text field, because it seems that there is no
476        value field for strings */
477     value_copy_str_rpad (v, var_get_width (var), xmv->text, ' ');
478   else
479     {
480       const struct fmt_spec *fmt = var_get_write_format (var);
481       enum fmt_category fc  = fmt_get_category (fmt->type);
482
483       assert ( fc != FMT_CAT_STRING);
484
485       if ( 0 == xmlStrcmp (xmv->type, _xml("float")))
486         {
487           v->f = c_strtod (CHAR_CAST (const char *, xmv->value), NULL);
488         }
489       else
490         {
491           const char *text = xmv->value ?
492             CHAR_CAST (const char *, xmv->value) : CHAR_CAST (const char *, xmv->text);
493
494
495           free (data_in (ss_cstr (text), "UTF-8",
496                          fmt->type,
497                          v,
498                          var_get_width (var),
499                          "UTF-8"));
500         }
501     }
502 }
503
504
505 /* Try to find out how many sheets there are in the "workbook" */
506 static int
507 get_sheet_count (struct zip_reader *zreader)
508 {
509   xmlTextReaderPtr mxtr;
510   struct zip_member *meta = NULL;
511   meta = zip_member_open (zreader, "meta.xml");
512
513   if ( meta == NULL)
514     return -1;
515
516   mxtr = xmlReaderForIO ((xmlInputReadCallback) zip_member_read,
517                          (xmlInputCloseCallback) NULL,
518                          meta,   NULL, NULL, 0);
519
520   while (1 == xmlTextReaderRead (mxtr))
521     {
522       xmlChar *name = xmlTextReaderName (mxtr);
523       if ( 0 == xmlStrcmp (name, _xml("meta:document-statistic")))
524         {
525           xmlChar *attr = xmlTextReaderGetAttribute (mxtr, _xml ("meta:table-count"));
526
527           if ( attr != NULL)
528             {
529               int s = _xmlchar_to_int (attr);
530               xmlFreeTextReader (mxtr);
531               xmlFree (name);
532               xmlFree (attr);      
533               return s;
534             }
535           xmlFree (attr);      
536         }
537       xmlFree (name);      
538     }
539
540   xmlFreeTextReader (mxtr);
541   return -1;
542 }
543
544 static void
545 ods_error_handler (void *ctx, const char *mesg,
546                         UNUSED xmlParserSeverities sev, xmlTextReaderLocatorPtr loc)
547 {
548   struct ods_reader *r = ctx;
549        
550   msg (MW, _("There was a problem whilst reading the %s file `%s' (near line %d): `%s'"),
551        "ODF",
552        r->spreadsheet.file_name,
553        xmlTextReaderLocatorLineNumber (loc),
554        mesg);
555 }
556
557
558 static xmlTextReaderPtr
559 init_reader (struct ods_reader *r, bool report_errors)
560 {
561   struct zip_member *content = zip_member_open (r->zreader, "content.xml");
562   xmlTextReaderPtr xtr;
563
564   if ( content == NULL)
565     return NULL;
566
567   xtr = xmlReaderForIO ((xmlInputReadCallback) zip_member_read,
568                         (xmlInputCloseCallback) NULL,
569                         content,   NULL, NULL,
570                         report_errors ? 0 : (XML_PARSE_NOERROR | XML_PARSE_NOWARNING) );
571
572   if ( xtr == NULL)
573     return false;
574
575
576   r->spreadsheet.type = SPREADSHEET_ODS;
577
578   if (report_errors) 
579     xmlTextReaderSetErrorHandler (xtr, ods_error_handler, r);
580
581   return xtr;
582 }
583
584
585 struct spreadsheet *
586 ods_probe (const char *filename, bool report_errors)
587 {
588   struct ods_reader *r;
589   struct string errs = DS_EMPTY_INITIALIZER;
590   int sheet_count;
591   struct zip_reader *zr = zip_reader_create (filename, &errs);
592   xmlTextReaderPtr xtr;
593
594   if (zr == NULL)
595     {
596       if (report_errors)
597         {
598           msg (ME, _("Cannot open %s as a OpenDocument file: %s"),
599                filename, ds_cstr (&errs));
600         }
601       return NULL;
602     }
603
604   sheet_count = get_sheet_count (zr);
605
606   r = xzalloc (sizeof *r);
607   r->zreader = zr;
608   r->ref_cnt = 1;
609
610   xtr = init_reader (r, report_errors);
611   if (xtr == NULL)
612     {
613       goto error;
614     }
615   r->foo.xtr = xtr;
616   r->foo.row = 0;
617   r->foo.col = 0;
618   r->foo.current_sheet = 0;
619   r->foo.state = STATE_INIT;
620
621
622   r->spreadsheet.n_sheets = sheet_count;
623   r->n_allocated_sheets = 0;
624   r->sheets = NULL;
625
626   ds_destroy (&errs);
627
628   r->spreadsheet.file_name = filename;
629   return &r->spreadsheet;
630
631  error:
632   zip_reader_destroy (r->zreader);
633   ds_destroy (&errs);
634   free (r);
635   return NULL;
636 }
637
638 struct casereader *
639 ods_make_reader (struct spreadsheet *spreadsheet, 
640                  const struct spreadsheet_read_options *opts)
641 {
642   intf ret = 0;
643   xmlChar *type = NULL;
644   unsigned long int vstart = 0;
645   casenumber n_cases = CASENUMBER_MAX;
646   int i;
647   struct var_spec *var_spec = NULL;
648   int n_var_specs = 0;
649   xmlTextReaderPtr xtr;
650
651   struct ods_reader *r = (struct ods_reader *) spreadsheet;
652   xmlChar *val_string = NULL;
653
654   assert (r);
655   r->read_names = opts->read_names;
656   ds_init_empty (&r->ods_errs);
657   ++r->ref_cnt;
658
659   xtr = init_reader (r, true);
660   if ( xtr == NULL)
661     goto error;
662
663   r->rsd.xtr = xtr;
664   r->rsd.row = 0;
665   r->rsd.col = 0;
666   r->rsd.current_sheet = 0;
667   r->rsd.state = STATE_INIT;
668
669
670   if (opts->cell_range)
671     {
672       if ( ! convert_cell_ref (opts->cell_range,
673                                &r->start_col, &r->start_row,
674                                &r->stop_col, &r->stop_row))
675         {
676           msg (SE, _("Invalid cell range `%s'"),
677                opts->cell_range);
678           goto error;
679         }
680     }
681   else
682     {
683       r->start_col = 0;
684       r->start_row = 0;
685       r->stop_col = -1;
686       r->stop_row = -1;
687     }
688
689   r->target_sheet_name = xmlStrdup (BAD_CAST opts->sheet_name);
690   r->target_sheet_index = opts->sheet_index;
691
692   /* Advance to the start of the cells for the target sheet */
693   while ( ! reading_target_sheet (r, &r->rsd)  
694           || r->rsd.state != STATE_ROW || r->rsd.row <= r->start_row )
695     {
696       if (1 != (ret = xmlTextReaderRead (r->rsd.xtr)))
697            break;
698
699       process_node (r, &r->rsd);
700     }
701
702   if (ret < 1)
703     {
704       msg (MW, _("Selected sheet or range of spreadsheet `%s' is empty."),
705            spreadsheet->file_name);
706       goto error;
707     }
708
709   if ( opts->read_names)
710     {
711       while (1 == (ret = xmlTextReaderRead (r->rsd.xtr)))
712         {
713           int idx;
714
715           process_node (r, &r->rsd);
716
717           /* If the row is finished then stop for now */
718           if (r->rsd.state == STATE_TABLE && r->rsd.row > r->start_row)
719             break;
720
721           idx = r->rsd.col - r->start_col -1 ;
722
723           if ( idx < 0)
724             continue;
725
726           if (r->stop_col != -1 && idx > r->stop_col - r->start_col)
727             continue;
728
729           if (r->rsd.state == STATE_CELL_CONTENT 
730               &&
731               XML_READER_TYPE_TEXT  == r->rsd.node_type)
732             {
733               xmlChar *value = xmlTextReaderValue (r->rsd.xtr);
734
735               if ( idx >= n_var_specs)
736                 {
737                   var_spec = xrealloc (var_spec, sizeof (*var_spec) * (idx + 1));
738
739                   /* xrealloc (unlike realloc) doesn't initialise its memory to 0 */
740                   memset (var_spec + n_var_specs,
741                           0, 
742                           (idx - n_var_specs + 1) * sizeof (*var_spec));
743                   n_var_specs = idx + 1;
744                 }
745               var_spec[idx].firstval.text = 0;
746               var_spec[idx].firstval.value = 0;
747               var_spec[idx].firstval.type = 0;
748
749               var_spec [idx].name = strdup (CHAR_CAST (const char *, value));
750
751               xmlFree (value);
752             }
753         }
754     }
755
756   /* Read in the first row of data */
757   while (1 == xmlTextReaderRead (r->rsd.xtr))
758     {
759       int idx;
760       process_node (r, &r->rsd);
761
762       if ( ! reading_target_sheet (r, &r->rsd) )
763         break;
764
765       /* If the row is finished then stop for now */
766       if (r->rsd.state == STATE_TABLE &&
767           r->rsd.row > r->start_row + (opts->read_names ? 1 : 0))
768         break;
769
770       idx = r->rsd.col - r->start_col - 1;
771       if (idx < 0)
772         continue;
773
774       if (r->stop_col != -1 && idx > r->stop_col - r->start_col)
775         continue;
776
777       if ( r->rsd.state == STATE_CELL &&
778            XML_READER_TYPE_ELEMENT  == r->rsd.node_type)
779         {
780           type = xmlTextReaderGetAttribute (r->rsd.xtr, _xml ("office:value-type"));
781           val_string = xmlTextReaderGetAttribute (r->rsd.xtr, _xml ("office:value"));
782         }
783
784       if ( r->rsd.state == STATE_CELL_CONTENT &&
785            XML_READER_TYPE_TEXT  == r->rsd.node_type)
786         {
787           if (idx >= n_var_specs)
788             {
789               var_spec = xrealloc (var_spec, sizeof (*var_spec) * (idx + 1));
790               memset (var_spec + n_var_specs,
791                       0, 
792                       (idx - n_var_specs + 1) * sizeof (*var_spec));
793
794               var_spec [idx].name = NULL;
795               n_var_specs = idx + 1;
796             }
797
798           var_spec [idx].firstval.type = type;
799           var_spec [idx].firstval.text = xmlTextReaderValue (r->rsd.xtr);
800           var_spec [idx].firstval.value = val_string;
801
802           val_string = NULL;
803           type = NULL;
804         }
805     }
806
807
808   /* Create the dictionary and populate it */
809   r->spreadsheet.dict = r->dict = dict_create (
810     CHAR_CAST (const char *, xmlTextReaderConstEncoding (r->rsd.xtr)));
811
812   for (i = 0; i < n_var_specs ; ++i )
813     {
814       struct fmt_spec fmt;
815       struct variable *var = NULL;
816       char *name = dict_make_unique_var_name (r->dict, var_spec[i].name, &vstart);
817       int width  = xmv_to_width (&var_spec[i].firstval, opts->asw);
818       dict_create_var (r->dict, name, width);
819       free (name);
820
821       var = dict_get_var (r->dict, i);
822
823       if ( 0 == xmlStrcmp (var_spec[i].firstval.type, _xml("date")))
824         {
825           fmt.type = FMT_DATE;
826           fmt.d = 0;
827           fmt.w = 20;
828         }
829       else
830         fmt = fmt_default_for_width (width);
831
832       var_set_both_formats (var, &fmt);
833     }
834
835   /* Create the first case, and cache it */
836   r->used_first_case = false;
837
838   if ( n_var_specs ==  0 )
839     {
840       msg (MW, _("Selected sheet or range of spreadsheet `%s' is empty."),
841            spreadsheet->file_name);
842       goto error;
843     }
844
845   r->proto = caseproto_ref (dict_get_proto (r->dict));
846   r->first_case = case_create (r->proto);
847   case_set_missing (r->first_case);
848
849   for (i = 0 ; i < n_var_specs; ++i)
850     {
851       const struct variable *var = dict_get_var (r->dict, i);
852
853       convert_xml_to_value (r->first_case, var,  &var_spec[i].firstval);
854     }
855
856   /* Read in the first row of data */
857   while (1 == xmlTextReaderRead (r->rsd.xtr))
858     {
859       process_node (r, &r->rsd);
860
861       if (r->rsd.state == STATE_ROW)
862         break;
863     }
864
865
866   for ( i = 0 ; i < n_var_specs ; ++i )
867     {
868       free (var_spec[i].firstval.type);
869       free (var_spec[i].firstval.value);
870       free (var_spec[i].firstval.text);
871       free (var_spec[i].name);
872     }
873
874   free (var_spec);
875
876
877   return casereader_create_sequential
878     (NULL,
879      r->proto,
880      n_cases,
881      &ods_file_casereader_class, r);
882
883  error:
884   
885   for ( i = 0 ; i < n_var_specs ; ++i )
886     {
887       free (var_spec[i].firstval.type);
888       free (var_spec[i].firstval.value);
889       free (var_spec[i].firstval.text);
890       free (var_spec[i].name);
891     }
892
893   free (var_spec);
894
895   dict_destroy (r->spreadsheet.dict);
896   r->spreadsheet.dict = NULL;
897   ods_file_casereader_destroy (NULL, r);
898
899   return NULL;
900 }
901
902
903 /* Reads and returns one case from READER's file.  Returns a null
904    pointer on failure. */
905 static struct ccase *
906 ods_file_casereader_read (struct casereader *reader UNUSED, void *r_)
907 {
908   struct ccase *c = NULL;
909   struct ods_reader *r = r_;
910
911   if (!r->used_first_case)
912     {
913       r->used_first_case = true;
914       return r->first_case;
915     }
916
917
918   /* Advance to the start of a row. (If there is one) */
919   while (r->rsd.state != STATE_ROW 
920          && 1 == xmlTextReaderRead (r->rsd.xtr)
921          )
922     {
923       process_node (r, &r->rsd);
924     }
925
926
927   if ( ! reading_target_sheet (r, &r->rsd)  
928        ||  r->rsd.state < STATE_TABLE
929        ||  (r->stop_row != -1 && r->rsd.row > r->stop_row + 1)
930        )
931     {
932       return NULL;
933     }
934
935   c = case_create (r->proto);
936   case_set_missing (c);
937   
938   xmlChar *val_string = NULL;
939   xmlChar *type = NULL;
940
941   while (1 == xmlTextReaderRead (r->rsd.xtr))
942     {
943       process_node (r, &r->rsd);
944
945       if ( r->stop_row != -1 && r->rsd.row > r->stop_row + 1)
946         break;
947
948       if (r->rsd.state == STATE_CELL &&
949            r->rsd.node_type == XML_READER_TYPE_ELEMENT)
950         {
951           type = xmlTextReaderGetAttribute (r->rsd.xtr, _xml ("office:value-type"));
952           val_string = xmlTextReaderGetAttribute (r->rsd.xtr, _xml ("office:value"));
953         }
954
955       if (r->rsd.state == STATE_CELL_CONTENT && 
956            r->rsd.node_type == XML_READER_TYPE_TEXT)
957         {
958           int col;
959           struct xml_value *xmv = xzalloc (sizeof *xmv);
960           xmv->text = xmlTextReaderValue (r->rsd.xtr);
961           xmv->value = val_string;       
962           xmv->type = type;
963           val_string = NULL;
964
965           for (col = 0; col < r->rsd.col_span; ++col)
966             {
967               const struct variable *var;
968               const int idx = r->rsd.col - col - r->start_col - 1;
969               if (idx < 0)
970                 continue;
971               if (r->stop_col != -1 && idx > r->stop_col - r->start_col )
972                 break;
973               if (idx >= dict_get_var_cnt (r->dict))
974                 break;
975
976               var = dict_get_var (r->dict, idx);
977               convert_xml_to_value (c, var, xmv);
978             }
979
980           xmlFree (xmv->text);
981           xmlFree (xmv->value);
982           xmlFree (xmv->type);
983           free (xmv);
984         }
985       if ( r->rsd.state <= STATE_TABLE)
986         break;
987     }
988
989   return c;
990 }
991 #endif