chiark / gitweb /
7a65c519f1cb4a44a12a1a567c402182d605aea4
[mLib] / test / tvec-core.c
1 /* -*-c-*-
2  *
3  * Main test vector driver
4  *
5  * (c) 2023 Straylight/Edgeware
6  */
7
8 /*----- Licensing notice --------------------------------------------------*
9  *
10  * This file is part of the mLib utilities library.
11  *
12  * mLib is free software: you can redistribute it and/or modify it under
13  * the terms of the GNU Library General Public License as published by
14  * the Free Software Foundation; either version 2 of the License, or (at
15  * your option) any later version.
16  *
17  * mLib is distributed in the hope that it will be useful, but WITHOUT
18  * ANY WARRANTY; without even the implied warranty of MERCHANTABILITY or
19  * FITNESS FOR A PARTICULAR PURPOSE.  See the GNU Library General Public
20  * License for more details.
21  *
22  * You should have received a copy of the GNU Library General Public
23  * License along with mLib.  If not, write to the Free Software
24  * Foundation, Inc., 59 Temple Place - Suite 330, Boston, MA 02111-1307,
25  * USA.
26  */
27
28 /*----- Header files ------------------------------------------------------*/
29
30 #include <assert.h>
31 #include <ctype.h>
32 #include <errno.h>
33 #include <string.h>
34
35 #include "alloc.h"
36 #include "growbuf.h"
37 #include "macros.h"
38 #include "quis.h"
39
40 #include "tvec.h"
41 #include "tvec-adhoc.h"
42 #include "tvec-output.h"
43 #include "tvec-types.h"
44
45 /*----- Output ------------------------------------------------------------*/
46
47 /* --- @tvec_strlevel@ --- *
48  *
49  * Arguments:   @unsigned level@ = level code
50  *
51  * Returns:     A human-readable description.
52  *
53  * Use:         Converts a level code into something that you can print in a
54  *              message.
55  */
56
57 const char *tvec_strlevel(unsigned level)
58 {
59   switch (level) {
60 #define CASE(tag, name, val)                                            \
61     case TVLV_##tag: return (name);
62     TVEC_LEVELS(CASE)
63 #undef CASE
64     default: return ("??");
65   }
66 }
67
68 /* --- @tvec_report@, @tvec_report_v@ --- *
69  *
70  * Arguments:   @struct tvec_state *tv@ = test-vector state
71  *              @unsigned level@ = severity level (@TVlEV_...@)
72  *              @const char *msg@, @va_list *ap@ = error message
73  *
74  * Returns:     ---
75  *
76  * Use:         Report an message with a given severity.  Messages with level
77  *              @TVLV_ERR@ or higher force a nonzero exit code.
78  */
79
80 void tvec_report(struct tvec_state *tv, unsigned level, const char *msg, ...)
81 {
82   va_list ap;
83
84   va_start(ap, msg); tvec_report_v(tv, level, msg, &ap); va_end(ap);
85 }
86
87 void tvec_report_v(struct tvec_state *tv, unsigned level,
88                    const char *msg, va_list *ap)
89 {
90   tv->output->ops->report(tv->output, level, msg, ap);
91   if (level >= TVLV_ERR) tv->f |= TVSF_ERROR;
92 }
93
94 /* --- @tvec_error@, @tvec_notice@, @tvec_info@ --- *
95  *
96  * Arguments:   @struct tvec_state *tv@ = test-vector state
97  *              @const char *msg@, @va_list *ap@ = error message
98  *
99  * Returns:     The @tvec_error@ function returns %$-1$% as a trivial
100  *              convenience; @tvec_notice@ does not return a value.
101  *
102  * Use:         Report a message.  Errors are distinct from test
103  *              failures, and indicate that a problem was encountered which
104  *              compromised the activity of testing.  Notices are important
105  *              information which doesn't fit into any other obvious
106  *              category.  Information is anything else, and is a reasonable
107  *              fallback for writing unstructured information in the absence
108  *              of dedicated support in an output driver.
109  *
110  *              These functions are simple convenience wrappers around
111  *              @tvec_report@.  Use @tvec_report_v@ directly if you have a
112  *              captured @va_list@ of arguments to format.
113  */
114
115 int tvec_error(struct tvec_state *tv, const char *msg, ...)
116 {
117   va_list ap;
118
119   va_start(ap, msg); tvec_report_v(tv, TVLV_ERR, msg, &ap); va_end(ap);
120   return (-1);
121 }
122
123 void tvec_notice(struct tvec_state *tv, const char *msg, ...)
124 {
125   va_list ap;
126
127   va_start(ap, msg); tvec_report_v(tv, TVLV_NOTE, msg, &ap); va_end(ap);
128 }
129
130 void tvec_info(struct tvec_state *tv, const char *msg, ...)
131 {
132   va_list ap;
133
134   va_start(ap, msg); tvec_report_v(tv, TVLV_INFO, msg, &ap); va_end(ap);
135 }
136
137 /* --- @tvec_outputext@ --- *
138  *
139  * Arguments:   @struct tvec_state *tv@ = test-vector state
140  *              @struct tvec_output **o_out@ = output object
141  *              @struct tvec_fallbackoutput *fo@ = fallback output
142  *                      (uninitialized)
143  *              @const char *ext@ = extension name
144  *              @const void *fops@ = fallback operations
145  *
146  * Returns:     An output extension operations table.
147  *
148  * Use:         Calls the output driver's @extend@ function, passing @ext@ as
149  *              the extension name.  If the output driver recognizes the
150  *              extension, then @*o_out@ is set to the output driver object
151  *              and the driver's extension-operations table is returned.
152  *              Otherwise, a fallback output object is constructed in @*fo@,
153  *              @*o_out@ is set to @&fo->_o@, and @fops@ is returned.  In
154  *              this way, a call to an extension function, passing @*o_out@
155  *              as the output object, will either call the output driver's
156  *              extension implementation or the fallback implementation as
157  *              required.
158  */
159
160 const void *tvec_outputext(struct tvec_state *tv, struct tvec_output **o_out,
161                            struct tvec_fallbackoutput *fo,
162                            const char *ext, const void *fops)
163 {
164   const void *ops;
165   struct tvec_output *o = tv->output;
166
167   ops = o->ops->extend(o, ext);
168   if (!ops) { fo->_o.ops = 0; fo->tv = tv; o = &fo->_o; ops = fops; }
169   *o_out = o; return (ops);
170 }
171
172 /*----- Test processing ---------------------------------------------------*/
173
174 /* --- @tvec_skipgroup@, @tvec_skipgroup_v@ --- *
175  *
176  * Arguments:   @struct tvec_state *tv@ = test-vector state
177  *              @const char *excuse@, @va_list *ap@ = reason why skipped
178  *
179  * Returns:     ---
180  *
181  * Use:         Skip the current group.  This should only be called from a
182  *              test environment @setup@ function; a similar effect occurs if
183  *              the @setup@ function fails.
184  */
185
186 void tvec_skipgroup(struct tvec_state *tv, const char *excuse, ...)
187 {
188   va_list ap;
189
190   va_start(ap, excuse); tvec_skipgroup_v(tv, excuse, &ap); va_end(ap);
191 }
192
193 void tvec_skipgroup_v(struct tvec_state *tv, const char *excuse, va_list *ap)
194 {
195   if (!(tv->f&TVSF_SKIP)) {
196     tv->f |= TVSF_SKIP; tv->grps[TVOUT_SKIP]++;
197     tv->output->ops->skipgroup(tv->output, excuse, ap);
198   }
199 }
200
201 /* --- @set_outcome@ --- *
202  *
203  * Arguments:   @struct tvec_state *tv@ = test-vector state
204  *              @unsigned out@ = the new outcome
205  *
206  * Returns:     ---
207  *
208  * Use:         Sets the outcome bits in the test state flags, and clears
209  *              @TVSF_ACTIVE@.
210  */
211
212 static void set_outcome(struct tvec_state *tv, unsigned out)
213   { tv->f = (tv->f&~(TVSF_ACTIVE | TVSF_OUTMASK)) | (out << TVSF_OUTSHIFT); }
214
215 /* --- @tvec_skip@, @tvec_skip_v@ --- *
216  *
217  * Arguments:   @struct tvec_state *tv@ = test-vector state
218  *              @const char *excuse@, @va_list *ap@ = reason why test skipped
219  *
220  * Returns:     ---
221  *
222  * Use:         Skip the current test.  This should only be called from a
223  *              test environment @run@ function; a similar effect occurs if
224  *              the @before@ function fails.
225  */
226
227 void tvec_skip(struct tvec_state *tv, const char *excuse, ...)
228 {
229   va_list ap;
230   va_start(ap, excuse); tvec_skip_v(tv, excuse, &ap); va_end(ap);
231 }
232
233 void tvec_skip_v(struct tvec_state *tv, const char *excuse, va_list *ap)
234 {
235   assert(tv->f&TVSF_ACTIVE);
236   set_outcome(tv, TVOUT_SKIP);
237   tv->output->ops->skip(tv->output, excuse, ap);
238 }
239
240 /* --- @tvec_fail@, @tvec_fail_v@ --- *
241  *
242  * Arguments:   @struct tvec_state *tv@ = test-vector state
243  *              @const char *detail@, @va_list *ap@ = description of test
244  *
245  * Returns:     ---
246  *
247  * Use:         Report the current test as a failure.  This function can be
248  *              called multiple times for a single test, e.g., if the test
249  *              environment's @run@ function invokes the test function
250  *              repeatedly; but a single test that fails repeatedly still
251  *              only counts as a single failure in the statistics.  The
252  *              @detail@ string and its format parameters can be used to
253  *              distinguish which of several invocations failed; it can
254  *              safely be left null if the test function is run only once.
255  */
256
257 void tvec_fail(struct tvec_state *tv, const char *detail, ...)
258 {
259   va_list ap;
260   va_start(ap, detail); tvec_fail_v(tv, detail, &ap); va_end(ap);
261 }
262
263 void tvec_fail_v(struct tvec_state *tv, const char *detail, va_list *ap)
264 {
265   assert((tv->f&TVSF_ACTIVE) ||
266          (tv->f&TVSF_OUTMASK) == (TVOUT_LOSE << TVSF_OUTSHIFT));
267   set_outcome(tv, TVOUT_LOSE); tv->output->ops->fail(tv->output, detail, ap);
268 }
269
270 /* --- @tvec_dumpreg@ --- *
271  *
272  * Arguments:   @struct tvec_state *tv@ = test-vector state
273  *              @unsigned disp@ = the register disposition (@TVRD_...@)
274  *              @const union tvec_regval *tv@ = register value, or null
275  *              @const struct tvec_regdef *rd@ = register definition
276  *
277  * Returns:     ---
278  *
279  * Use:         Dump a register value to the output.  This is the lowest-
280  *              level function for dumping registers, and calls the output
281  *              formatter directly.
282  *
283  *              Usually @tvec_mismatch@ is much more convenient.  Low-level
284  *              access is required for reporting `virtual' registers
285  *              corresponding to test environment settings.
286  */
287
288 void tvec_dumpreg(struct tvec_state *tv,
289                   unsigned disp, const union tvec_regval *r,
290                   const struct tvec_regdef *rd)
291   { tv->output->ops->dumpreg(tv->output, disp, r, rd); }
292
293 /* --- @tvec_mismatch@ --- *
294  *
295  * Arguments:   @struct tvec_state *tv@ = test-vector state
296  *              @unsigned f@ = flags (@TVMF_...@)
297  *
298  * Returns:     ---
299  *
300  * Use:         Dumps registers suitably to report a mismatch.  The flag bits
301  *              @TVMF_IN@ and @TVF_OUT@ select input-only and output
302  *              registers.  If both are reset then nothing happens.
303  *              Suppressing the output registers may be useful, e.g., if the
304  *              test function crashed rather than returning outputs.
305  */
306
307 void tvec_mismatch(struct tvec_state *tv, unsigned f)
308 {
309   const struct tvec_regdef *rd;
310   const struct tvec_reg *rin, *rout;
311
312   for (rd = tv->test->regs; rd->name; rd++) {
313     if (rd->i >= tv->cfg.nrout) {
314       if (!(f&TVMF_IN)) continue;
315       rin = TVEC_REG(tv, in, rd->i);
316       tvec_dumpreg(tv, TVRD_INPUT, rin->f&TVRF_LIVE ? &rin->v : 0, rd);
317     } else {
318       if (!(f&TVMF_OUT)) continue;
319       rin = TVEC_REG(tv, in, rd->i); rout = TVEC_REG(tv, out, rd->i);
320       if (!(rin->f&TVRF_LIVE))
321         tvec_dumpreg(tv, TVRD_OUTPUT, rout->f&TVRF_LIVE ? &rout->v : 0, rd);
322       else if ((rout->f&TVRF_LIVE) && rd->ty->eq(&rin->v, &rout->v, rd))
323         tvec_dumpreg(tv, TVRD_MATCH, &rin->v, rd);
324       else {
325         tvec_dumpreg(tv, TVRD_FOUND, rout->f&TVRF_LIVE ? &rout->v : 0, rd);
326         tvec_dumpreg(tv, TVRD_EXPECT, &rin->v, rd);
327       }
328     }
329   }
330 }
331
332 /*----- Parsing -----------------------------------------------------------*/
333
334 /* --- @tvec_syntax@, @tvec_syntax_v@ --- *
335  *
336  * Arguments:   @struct tvec_state *tv@ = test-vector state
337  *              @int ch@ = the character found (in @fgetc@ format)
338  *              @const char *expect@, @va_list *ap@ = what was expected
339  *
340  * Returns:     %$-1$%.
341  *
342  * Use:         Report a syntax error quoting @ch@ and @expect@.
343  *
344  *              If @ch@ is a newline, or if @TVSF_NEXT@ is set, then unread
345  *              it so that it can be read again (e.g., by @tvec_nexttoken@).
346  *              The intent here is that you can safely read a character,
347  *              inspect it, and then complain about it with @tvec_syntax@
348  *              without having to worry too much about backing up.  The
349  *              flipside of this is that you %%\emph{must}%% read a
350  *              character, even if you don't have one ready, e,g, if you
351  *              called @tvec_nexttoken@ and it said there wasn't one
352  *              available.
353  */
354
355 int tvec_syntax(struct tvec_state *tv, int ch, const char *expect, ...)
356 {
357   va_list ap;
358
359   va_start(ap, expect); tvec_syntax_v(tv, ch, expect, &ap); va_end(ap);
360   return (-1);
361 }
362
363 int tvec_syntax_v(struct tvec_state *tv, int ch,
364                   const char *expect, va_list *ap)
365 {
366   dstr d = DSTR_INIT;
367   char found[8];
368   unsigned lno_adjust;
369
370   if (tv->f&TVSF_NEXT) {
371     strcpy(found, "#eod");
372     if (ch != EOF) ungetc(ch, tv->fp);
373     lno_adjust = 1;
374   }
375   else {
376     switch (ch) {
377       case EOF: strcpy(found, "#eof"); break;
378       case '\n': strcpy(found, "#eol"); ungetc(ch, tv->fp); break;
379       default:
380         if (isprint(ch)) sprintf(found, "`%c'", ch);
381         else sprintf(found, "#\\x%02x", ch);
382         break;
383     }
384     lno_adjust = 0;
385   }
386   dstr_vputf(&d, expect, ap);
387   tv->lno -= lno_adjust;
388   tvec_error(tv, "syntax error: expected %s but found %s", d.buf, found);
389   tv->lno += lno_adjust;
390   dstr_destroy(&d); return (-1);
391 }
392
393 /* --- @tvec_unkregerr@, @tvec_dupregerr@, @tvec_synthregerr@ --- *
394  *
395  * Arguments:   @struct tvec_state *tv@ = test-vector state
396  *              @const char *name@ = register or pseudoregister name
397  *
398  * Returns:     %$-1$%.
399  *
400  * Use:         Reports an error about a misused register: @tvec_unkregerr@
401  *              reports that the register is unknown, @tvec_dupregerr@ that
402  *              it is already assigned, and @tvec_synthregerr@ that it is
403  *              synthetic.
404  */
405
406 int tvec_unkregerr(struct tvec_state *tv, const char *name)
407 {
408   return (tvec_error(tv, "unknown special register `%s' for test `%s'",
409                      name, tv->test->name));
410 }
411
412 int tvec_dupregerr(struct tvec_state *tv, const char *name)
413 {
414   return (tvec_error(tv, "register `%s' is already set in test `%s'",
415                      name, tv->test->name));
416 }
417
418 int tvec_synthregerr(struct tvec_state *tv, const char *name)
419 {
420   return (tvec_error(tv, "register `%s' is synthetic in test `%s' "
421                      "and cannot be assigned",
422                      name, tv->test->name));
423 }
424
425 /* --- @tvec_skipspc@ --- *
426  *
427  * Arguments:   @struct tvec_state *tv@ = test-vector state
428  *
429  * Returns:     ---
430  *
431  * Use:         Advance over any whitespace characters other than newlines.
432  *              This will stop at `;', end-of-file, or any other kind of
433  *              non-whitespace; and it won't consume a newline.
434  */
435
436 void tvec_skipspc(struct tvec_state *tv)
437 {
438   int ch;
439
440   for (;;) {
441     ch = getc(tv->fp);
442     if (ch == EOF) break;
443     else if (ch == '\n' || !isspace(ch)) { ungetc(ch, tv->fp); break; }
444   }
445 }
446
447 /* --- @flush_line@, @flush_to_next@ --- *
448  *
449  * Arguments:   @struct tvec_state *tv@ = test-vector state
450  *              @unsigned f@ = flags (@FF_...@)
451  *
452  * Returns:     Zero on success, %$-1$% on error.
453  *
454  * Use:         Advance to the start of the next line (@flush_line@) or the
455  *              next non-continuation line (@flush_to_next@), consuming the
456  *              preceding newline.  The line number count is updated
457  *              appropriately.  If @TVSF_NEXT@ is set on entry, then nothing
458  *              happens; @TVSF_NEXT@ is always set on exit.
459  *
460  *              A syntax error is reported if the file ends in mid-line, or
461  *              if non-whitespace, non-comment material is found and
462  *              @FF_ALLOWANY@ is not set in @f@.
463  */
464
465 #define FF_ALLOWANY 1u
466 static int flush_line(struct tvec_state *tv, unsigned f)
467 {
468   int ch, rc = 0;
469
470   if (tv->f&TVSF_NEXT) return (0);
471   for (;;) {
472     ch = getc(tv->fp);
473     switch (ch) {
474       case '\n': tv->lno++; tv->f |= TVSF_NEXT; return (rc);
475       case EOF: return (rc);
476       case ';': f |= FF_ALLOWANY; break;
477       default:
478         if (!(f&FF_ALLOWANY) && !isspace(ch)) {
479           tvec_syntax(tv, ch, "end-of-line");
480           rc = -1; f |= FF_ALLOWANY;
481         }
482         break;
483     }
484   }
485 }
486
487 int flush_to_next(struct tvec_state *tv, unsigned f)
488 {
489   int ch, rc = 0;
490
491   if (tv->f&TVSF_NEXT) return (0);
492   for (;;) {
493     if (flush_line(tv, f)) { rc = -1; f |= FF_ALLOWANY; }
494     ch = getc(tv->fp);
495     if (ch == EOF) break;
496     else if (ch == '\n' || !ISSPACE(ch)) { ungetc(ch, tv->fp); break; }
497   }
498   return (rc);
499 }
500
501 /* --- @tvec_nexttoken@ --- *
502  *
503  * Arguments:   @struct tvec_state *tv@ = test-vector state
504  *
505  * Returns:     Zero if there is a next token which can be read; %$-1$% if no
506  *              token is available.
507  *
508  * Use:         Advance to the next whitespace-separated token, which may be
509  *              on the next line.
510  *
511  *              Tokens are separated by non-newline whitespace, comments, and
512  *              newlines followed by whitespace; a newline /not/ followed by
513  *              whitespace instead begins the next assignment, and two
514  *              newlines separated only by whitespace terminate the data for
515  *              a test.
516  *
517  *              If this function returns zero, then the next character in the
518  *              file begins a suitable token which can be read and processed.
519  *              If it returns %$-1$% then there is no such token, @TVSF_NEXT@
520  *              is set, and the file position is left correctly.  The line
521  *              number count is updated appropriately.
522  */
523
524 int tvec_nexttoken(struct tvec_state *tv)
525 {
526   enum { TAIL, NEWLINE, INDENT, COMMENT };
527   int ch;
528   unsigned s = TAIL;
529
530   if (tv->f&TVSF_NEXT) return (-1);
531   for (;;) {
532     ch = getc(tv->fp);
533     switch (ch) {
534       case EOF:
535         if (s != NEWLINE) tvec_syntax(tv, EOF, "characters");
536         tv->f |= TVSF_NEXT; return (-1);
537
538       case ';':
539         s = COMMENT;
540         break;
541
542       case '\n':
543         if (s == NEWLINE || s == INDENT)
544           { tv->f |= TVSF_NEXT; ungetc(ch, tv->fp); return (-1); }
545         else { tv->lno++; s = NEWLINE; }
546         break;
547
548       default:
549         if (isspace(ch))
550           { if (s == NEWLINE) s = INDENT; }
551         else if (s != COMMENT) {
552           ungetc(ch, tv->fp);
553           if (s == NEWLINE) { tv->f |= TVSF_NEXT; return (-1); }
554           else return (0);
555         }
556         break;
557     }
558   }
559 }
560
561 /* --- @readword_internal@ --- *
562  *
563  * Arguments:   @struct tvec_state *tv@ = test-vector state
564  *              @int ch@ = the lookahead character
565  *              @dstr *d@ = string to append the word to
566  *              @const char **p_inout@ = pointer into string, updated
567  *              @const char *delims@ = additional delimiters to stop at
568  *
569  * Returns:     ---
570  *
571  * Use:         This is the core of the various @readword@ functions.
572  *
573  *              It expects a lookahead character to have been read already,
574  *              and deals only with the task of accumulating the remaining
575  *              characters into the string.
576  */
577
578 static void readword_internal(struct tvec_state *tv, int ch,
579                              dstr *d, const char **p_inout,
580                              const char *delims)
581 {
582   size_t pos = 0;
583
584   if (p_inout) pos = *p_inout - d->buf;
585   if (d->len) {
586     if (pos == d->len) pos++;
587     DPUTC(d, ' ');
588   }
589   do {
590     DPUTC(d, ch);
591     ch = getc(tv->fp);
592   } while (ch && ch != EOF && !isspace(ch) &&
593            (!delims || !strchr(delims, ch)));
594   DPUTZ(d); if (ch != EOF) ungetc(ch, tv->fp);
595   if (p_inout) *p_inout = d->buf + pos;
596 }
597
598 /* --- @readword_fail@ --- *
599  *
600  * Arguments:   @struct tvec_state *tv@ = test-vector state
601  *              @int ch@ = the offending character
602  *              @const char *expect@, @va_list *ap@ = what was expected
603  *
604  * Returns:     ---
605  *
606  * Use:         If @expect@ is not null, report a syntax error citing
607  *              @expect@ and the character @ch@.  Otherwise, just push @ch@
608  *              back.
609  */
610
611 static void readword_fail(struct tvec_state *tv, int ch,
612                          const char *expect, va_list *ap)
613 {
614   if (expect) tvec_syntax(tv, ch, expect, ap);
615   else if (ch != EOF) ungetc(ch, tv->fp);
616 }
617
618 /* --- @tvec_readword@, @tvec_readword_v@ --- *
619  *
620  * Arguments:   @struct tvec_state *tv@ = test-vector state
621  *              @dstr *d@ = string to append the word to
622  *              @const char **p_inout@ = pointer into string, updated
623  *              @const char *delims@ = additional delimiters to stop at
624  *              @const char *expect@, @va_list *ap@ = what was expected
625  *
626  * Returns:     Zero on success, %$-1$% on failure.
627  *
628  * Use:         A `word' consists of characters other than whitespace, null
629  *              characters, and other than those listed in @delims@;
630  *              furthermore, a word does not begin with a `;'.  (If you want
631  *              reading to stop at comments not preceded by whitespace, then
632  *              include `;' in @delims@.  This is a common behaviour.)
633  *
634  *              The function advances past whitespace and comments, as for
635  *              @tvec_nexttoken@.  If there is no word beginning after the
636  *              current file position, but before the start of the next
637  *              non-continuation line, then return %$-1$%; furthermore, if
638  *              @expect@ is not null, then report an appropriate error via
639  *              @tvec_syntax@.
640  *
641  *              Otherwise, the word is accumulated in @d@ and zero is
642  *              returned; if @d@ was not empty at the start of the call, the
643  *              newly read word is separated from the existing material by a
644  *              single space character.  Since null bytes are never valid
645  *              word constituents, a null terminator is written to @d@, and
646  *              it is safe to treat the string in @d@ as being null-
647  *              terminated.
648  *
649  *              If @p_inout@ is not null, then @*p_inout@ must be a pointer
650  *              into @d->buf@, which will be adjusted so that it will
651  *              continue to point at the same position even if the buffer is
652  *              reallocated.  As a subtle tweak, if @*p_inout@ initially
653  *              points at the end of the buffer, then it will be adjusted to
654  *              point at the beginning of the next word, rather than at the
655  *              additional intervening space.
656  */
657
658 int tvec_readword(struct tvec_state *tv, dstr *d, const char **p_inout,
659                   const char *delims, const char *expect, ...)
660 {
661   va_list ap;
662   int rc;
663
664   va_start(ap, expect);
665   rc = tvec_readword_v(tv, d, p_inout, delims, expect, &ap);
666   va_end(ap);
667   return (rc);
668 }
669
670 int tvec_readword_v(struct tvec_state *tv, dstr *d, const char **p_inout,
671                     const char *delims, const char *expect, va_list *ap)
672 {
673   int ch, rc;
674
675   rc = tvec_nexttoken(tv); ch = getc(tv->fp);
676   if (rc || !ch || (delims && strchr(delims, ch)))
677     { readword_fail(tv, ch, expect, ap); return (-1); }
678   readword_internal(tv, ch, d, p_inout, delims);
679   return (0);
680 }
681
682 /* --- @readword@ --- *
683  *
684  * Arguments:   @struct tvec_state *tv@ = test-vector state
685  *              @const char *expect@ = what was expected
686  *
687  * Returns:     Zero on success, %$-1$% on error.
688  *
689  * Use:         As for @tvec_readword@, but this version does not seek beyond
690  *              the current line for the start of the word.  It's therefore
691  *              suitable for reading test-group and register names.
692  */
693
694 static int readword(struct tvec_state *tv, dstr *d, const char *delims,
695                     const char *expect, ...)
696 {
697   va_list ap;
698   int ch, rc;
699
700   va_start(ap, expect);
701   tvec_skipspc(tv); ch = getc(tv->fp);
702   if (!ch || ch == '\n' || ch == EOF || ch == ';' ||
703       (delims && strchr(delims, ch)))
704     { readword_fail(tv, ch, expect, &ap); rc = -1; }
705   else
706     { readword_internal(tv, ch, d, 0, delims); rc = 0; }
707   va_end(ap);
708   return (rc);
709 }
710
711 /*----- Main machinery ----------------------------------------------------*/
712
713 struct groupstate {
714   void *ctx;                            /* test environment context */
715   unsigned f;                           /* flags */
716 #define GRPF_SETOUTC 1u                 /*   set outcome */
717 #define GRPF_SETMASK (GRPF_SETOUTC)     /*   mask of all variable flags */
718 };
719 #define GROUPSTATE_INIT { 0, 0 }
720
721 /* --- @tvec_initregs@, @tvec_releaseregs@ --- *
722  *
723  * Arguments:   @struct tvec_state *tv@ = test-vector state
724  *
725  * Returns:     ---
726  *
727  * Use:         Initialize or release, respectively, the registers required
728  *              by the current test.  All of the registers, both input and
729  *              output, are effected.  Initialized registers are not marked
730  *              live.
731  */
732
733 void tvec_initregs(struct tvec_state *tv)
734 {
735   const struct tvec_regdef *rd;
736   struct tvec_reg *r;
737
738   for (rd = tv->test->regs; rd->name; rd++) {
739     assert(rd->i < tv->cfg.nreg); r = TVEC_REG(tv, in, rd->i);
740     rd->ty->init(&r->v, rd); r->f = 0;
741     if (rd->i < tv->cfg.nrout)
742       { r = TVEC_REG(tv, out, rd->i); rd->ty->init(&r->v, rd); r->f = 0; }
743   }
744 }
745
746 void tvec_releaseregs(struct tvec_state *tv)
747 {
748   const struct tvec_regdef *rd;
749   struct tvec_reg *r;
750
751   for (rd = tv->test->regs; rd->name; rd++) {
752     assert(rd->i < tv->cfg.nreg); r = TVEC_REG(tv, in, rd->i);
753     rd->ty->release(&r->v, rd); r->f = 0;
754     if (rd->i < tv->cfg.nrout)
755       { r = TVEC_REG(tv, out, rd->i); rd->ty->release(&r->v, rd); r->f = 0; }
756   }
757 }
758
759 /* --- @tvec_resetoutputs@ --- *
760  *
761  * Arguments:   @struct tvec_state *tv@ = test-vector state
762  *
763  * Returns:     ---
764  *
765  * Use:         Reset (releases and reinitializes) the output registers in
766  *              the test state.  This is mostly of use to test environment
767  *              @run@ functions, between invocations of the test function.
768  *              Output registers are marked live if and only if the
769  *              corresponding input register is live.
770  */
771
772 void tvec_resetoutputs(struct tvec_state *tv)
773 {
774   const struct tvec_regdef *rd;
775   struct tvec_reg *r;
776
777   for (rd = tv->test->regs; rd->name; rd++) {
778     assert(rd->i < tv->cfg.nreg);
779     if (rd->i >= tv->cfg.nrout) continue;
780     r = TVEC_REG(tv, out, rd->i);
781     rd->ty->release(&r->v, rd);
782     rd->ty->init(&r->v, rd);
783     r->f = TVEC_REG(tv, in, rd->i)->f&TVRF_LIVE;
784   }
785 }
786
787 /* --- @tvec_checkregs@ --- *
788  *
789  * Arguments:   @struct tvec_state *tv@ = test-vector state
790  *
791  * Returns:     Zero on success, %$-1$% on mismatch.
792  *
793  * Use:         Compare the active output registers (according to the current
794  *              test group definition) with the corresponding input register
795  *              values.  A mismatch occurs if the two values differ
796  *              (according to the register type's @eq@ method), or if the
797  *              input is live but the output is dead.
798  *
799  *              This function only checks for a mismatch and returns the
800  *              result; it takes no other action.  In particular, it doesn't
801  *              report a failure, or dump register values.
802  */
803
804 int tvec_checkregs(struct tvec_state *tv)
805 {
806   const struct tvec_regdef *rd;
807   const struct tvec_reg *rin, *rout;
808
809   for (rd = tv->test->regs; rd->name; rd++) {
810     if (rd->i >= tv->cfg.nrout) continue;
811     rin = TVEC_REG(tv, in, rd->i); rout = TVEC_REG(tv, out, rd->i);
812     if (!(rin->f&TVRF_LIVE)) continue;
813     if (!(rout->f&TVRF_LIVE) || !rd->ty->eq(&rin->v, &rout->v, rd))
814       return (-1);
815   }
816   return (0);
817 }
818
819 /* --- @tvec_check@, @tvec_check_v@ --- *
820  *
821  * Arguments:   @struct tvec_state *tv@ = test-vector state
822  *              @const char *detail@, @va_list *ap@ = description of test
823  *
824  * Returns:     ---
825  *
826  * Use:         Check the register values, reporting a failure and dumping
827  *              the registers in the event of a mismatch.  This just wraps up
828  *              @tvec_checkregs@, @tvec_fail@ and @tvec_mismatch@ in the
829  *              obvious way.
830  */
831
832 void tvec_check(struct tvec_state *tv, const char *detail, ...)
833 {
834   va_list ap;
835   va_start(ap, detail); tvec_check_v(tv, detail, &ap); va_end(ap);
836 }
837
838 void tvec_check_v(struct tvec_state *tv, const char *detail, va_list *ap)
839 {
840   if (tvec_checkregs(tv))
841     { tvec_fail_v(tv, detail, ap); tvec_mismatch(tv, TVMF_IN | TVMF_OUT); }
842 }
843
844 /* --- @open_test@ --- *
845  *
846  * Arguments:   @struct tvec_state *tv@ = test-vector state
847  *
848  * Returns:     ---
849  *
850  * Use:         Note that we are now collecting data for a new test.  The
851  *              current line number is recorded in @test_lno@.  The
852  *              @TVSF_OPEN@ flag is set, and @TVSF_XFAIL@ is reset.
853  *
854  *              If a test is already open, then do nothing.
855  */
856
857 static void open_test(struct tvec_state *tv)
858 {
859   if (!(tv->f&TVSF_OPEN)) {
860     tv->test_lno = tv->lno;
861     tv->f |= TVSF_OPEN; tv->f &= ~TVSF_XFAIL;
862   }
863 }
864
865 /* --- @begin_test@ --- *
866  *
867  * Arguments:   @struct tvec_state *tv@ = test-vector state
868  *
869  * Returns:     ---
870  *
871  * Use:         Note that we're about to try running a state.  This is called
872  *              before the test environment's @before@ function.  Mark the
873  *              test as active, clear the outcome, and inform the output
874  *              driver.
875  */
876
877 static void begin_test(struct tvec_state *tv)
878 {
879   tv->f |= TVSF_ACTIVE; tv->f &= ~TVSF_OUTMASK;
880   tv->output->ops->btest(tv->output);
881 }
882
883 /* --- @tvec_endtest@ --- *
884  *
885  * Arguments:   @struct tvec_state *tv@ = test-vector state
886  *
887  * Returns:     ---
888  *
889  * Use:         End an ad-hoc test case,  The statistics are updated and the
890  *              outcome is reported to the output formatter.
891  */
892
893 void tvec_endtest(struct tvec_state *tv)
894 {
895   unsigned out;
896
897   if (!(tv->f&TVSF_ACTIVE)) /* nothing to do */;
898   else if (tv->f&TVSF_XFAIL) set_outcome(tv, TVOUT_XFAIL);
899   else set_outcome(tv, TVOUT_WIN);
900   out = (tv->f&TVSF_OUTMASK) >> TVSF_OUTSHIFT;
901   assert(out < TVOUT_LIMIT); tv->curr[out]++;
902   tv->output->ops->etest(tv->output, out);
903   tv->f &= ~TVSF_OPEN;
904 }
905
906 /* --- @tvec_xfail@ --- *
907  *
908  * Arguments:   @struct tvec_state *tv@ = test-vector state
909  *
910  * Returns:     ---
911  *
912  * Use:         Mark the current test as an `expected failure'.  That is, the
913  *              behaviour -- if everything works as expected -- is known to
914  *              be incorrect, perhaps as a result of a longstanding bug, so
915  *              calling it a `success' would be inappropriate.  A failure, as
916  *              reported by @tvec_fail@, means that the behaviour is not as
917  *              expected -- either the long-standing bug has been fixed, or a
918  *              new bug has been introduced -- so investigation is required.
919  *
920  *              An expected failure doesn't cause the test group or the
921  *              session as a whole to fail, but it isn't counted as a win
922  *              either.
923  */
924
925 void tvec_xfail(struct tvec_state *tv)
926   { tv->f |= TVSF_XFAIL; }
927
928 /* --- @check@ --- *
929  *
930  * Arguments:   @struct tvec_state *tv@ = test-vector state
931  *              @struct groupstate *g@ = private test group state
932  *
933  * Returns:     ---
934  *
935  * Use:         Run the current test.
936  *
937  *              This function is called once the data for a test has been
938  *              collected.  It's responsible for checking that all of the
939  *              necessary registers have been assigned values.  It marks the
940  *              output registers as live if the corresponding inputs are
941  *              live.  It calls the environment's @before@, @run@, and
942  *              @after@ functions if provided; if there is no @run@ function,
943  *              then it calls the test function directly, passing it the
944  *              environment's context pointer, and then calls @tvec_check@ to
945  *              verify the output values.
946  */
947
948 static void check(struct tvec_state *tv, struct groupstate *g)
949 {
950   const struct tvec_test *t = tv->test;
951   const struct tvec_env *env = t->env;
952   const struct tvec_regdef *rd;
953   struct tvec_reg *r;
954   unsigned f = 0;
955 #define f_err 1u
956
957   if (!(tv->f&TVSF_OPEN)) return;
958
959   for (rd = t->regs; rd->name; rd++) {
960     r = TVEC_REG(tv, in, rd->i);
961     if (r->f&TVRF_LIVE) {
962       if (rd->i < tv->cfg.nrout)
963         TVEC_REG(tv, out, rd->i)->f |= TVRF_LIVE;
964     } else if (!(r->f&TVRF_SEEN) && !(rd->f&(TVRF_OPT | TVRF_SYNTH))) {
965       tvec_error(tv, "required register `%s' not set in test `%s'",
966                  rd->name, t->name);
967       f |= f_err;
968     }
969   }
970
971   if (!(tv->f&TVSF_SKIP)) {
972     begin_test(tv);
973     if (f&f_err) tvec_skip(tv, "erroneous test data");
974     if (env && env->before) env->before(tv, g->ctx);
975     if (!(tv->f&TVSF_ACTIVE))
976       /* forced a skip */;
977     else if (env && env->run)
978       env->run(tv, t->fn, g->ctx);
979     else {
980       t->fn(tv->in, tv->out, g->ctx);
981       tvec_check(tv, 0);
982     }
983     tvec_endtest(tv);
984   }
985
986   if (env && env->after) env->after(tv, g->ctx);
987   g->f &= ~GRPF_SETMASK;
988   tv->f &= ~TVSF_OPEN; tvec_releaseregs(tv); tvec_initregs(tv);
989
990 #undef f_err
991 }
992
993 /* --- @begin_test_group@ --- *
994  *
995  * Arguments:   @struct tvec_state *tv@ = test-vector state
996  *              @struct groupstate *g@ = private test group state
997  *
998  * Returns:     ---
999  *
1000  * Use:         Begins a test group.  Expects @tv->test@ to have been set
1001  *              already.  Calls the output driver, initializes the registers,
1002  *              clears the @tv->curr@ counters, allocates the environment
1003  *              context and calls the environment @setup@ function.
1004  */
1005
1006 static void begin_test_group(struct tvec_state *tv, struct groupstate *g)
1007 {
1008   const struct tvec_test *t = tv->test;
1009   const struct tvec_env *env = t->env;
1010   unsigned i;
1011
1012   tv->output->ops->bgroup(tv->output);
1013   tv->f &= ~(TVSF_SKIP | TVSF_MUFFLE);
1014   tvec_initregs(tv);
1015   for (i = 0; i < TVOUT_LIMIT; i++) tv->curr[i] = 0;
1016   if (env && env->ctxsz) g->ctx = x_alloc(tv->a, env->ctxsz);
1017   if (env && env->setup) env->setup(tv, env, 0, g->ctx);
1018 }
1019
1020 /* --- @report_group@ --- *
1021  *
1022  * Arguments:   @struct tvec_state *tv@ = test-vector state
1023  *
1024  * Returns:     ---
1025  *
1026  * Use:         Reports the result of the test group to the output driver.
1027  *
1028  *              If all of the tests have been skipped then report this as a
1029  *              group skip.  Otherwise, determine and report the group
1030  *              outcome.
1031  */
1032
1033 static void report_group(struct tvec_state *tv)
1034 {
1035   unsigned i, out, nrun;
1036
1037   for (i = 0, nrun = 0; i < TVOUT_LIMIT; i++)
1038     { nrun += tv->curr[i]; tv->all[i] += tv->curr[i]; }
1039
1040   if (tv->curr[TVOUT_SKIP] == nrun)
1041     { out = TVOUT_SKIP; tvec_skipgroup(tv, nrun ? 0 : "no tests to run"); }
1042   else {
1043     if (tv->curr[TVOUT_LOSE]) out = TVOUT_LOSE;
1044     else out = TVOUT_WIN;
1045     tv->grps[out]++; tv->output->ops->egroup(tv->output);
1046   }
1047 }
1048
1049 /* --- @end_test_group@ --- *
1050  *
1051  * Arguments:   @struct tvec_state *tv@ = test-vector state
1052  *              @struct groupstate *g@ = private test group state
1053  *
1054  * Returns:     ---
1055  *
1056  * Use:         Handles the end of a test group.  Called at the end of the
1057  *              input file or when a new test group header is found.
1058  *
1059  *              If a test is open, call @check@ to see whether it worked.  If
1060  *              the test group is not being skipped, report the group
1061  *              result.  Call the test environment @teardown@ function.  Free
1062  *              the environment context and release the registers.
1063  *
1064  *              If there's no test group active, then nothing happens.
1065  */
1066
1067 static void end_test_group(struct tvec_state *tv, struct groupstate *g)
1068 {
1069   const struct tvec_test *t = tv->test;
1070   const struct tvec_env *env;
1071
1072   if (!t) return;
1073   if (tv->f&TVSF_OPEN) check(tv, g);
1074   if (!(tv->f&TVSF_SKIP)) report_group(tv);
1075   env = t->env; if (env && env->teardown) env->teardown(tv, g->ctx);
1076   tvec_releaseregs(tv); tv->test = 0; x_free(tv->a, g->ctx); g->ctx = 0;
1077 }
1078
1079 /* --- @core_findvar@, @core_setvar@ --- *
1080  *
1081  * Arguments:   @struct tvec_state *tv@ = test vector state
1082  *              @const char *var@ = variable name to set
1083  *              @const union tvec_regval *rv@ = register value
1084  *              @void **ctx_out@ = where to put the @setvar@ context
1085  *              @void *ctx@ = context pointer
1086  *
1087  * Returns:     @core_findvar@ returns a pointer to the variable definition,
1088  *              or null; @core_setvar@ returns zero on success or %$-1$% on
1089  *              error.
1090  *
1091  * Use:         Find a definition for a special variable.  The following
1092  *              special variables are supported.
1093  *
1094  *                * %|@outcome|% is a token describing how a successful
1095  *                  outcome of the test should be interpreted: %|success|% or
1096  *                  %|win|% are the default: a successful test is counted as
1097  *                  a pass; or %|expected-failure|% or %|xfail|% means a
1098  *                  successful test is counted as an expected failure.  A
1099  *                  mismatch is always considered a failure.
1100  */
1101
1102 enum { WIN, XFAIL, NOUT };
1103
1104 static int core_setvar(struct tvec_state *tv, const char *name,
1105                        const union tvec_regval *rv, void *ctx)
1106 {
1107   struct groupstate *g = ctx;
1108
1109   if (STRCMP(name, ==, "@outcome")) {
1110     if (g->f&GRPF_SETOUTC) return (tvec_dupregerr(tv, name));
1111     if (rv->u == XFAIL) tvec_xfail(tv);
1112     g->f |= GRPF_SETOUTC;
1113   } else assert(!"unknown var");
1114   return (0);
1115 }
1116
1117 static const struct tvec_uassoc outcome_assoc[] = {
1118   { "success",          WIN },
1119   { "win",              WIN },
1120   { "expected-failure", XFAIL },
1121   { "xfail",            XFAIL },
1122   TVEC_ENDENUM
1123 };
1124 static const struct tvec_urange outcome_range = { 0, NOUT - 1 };
1125 static const struct tvec_uenuminfo outcome_enum =
1126   { "test-outcome", outcome_assoc, &outcome_range };
1127 static const struct tvec_vardef outcome_vardef =
1128   { sizeof(struct tvec_reg), core_setvar,
1129     { "@outcome", &tvty_uenum, -1, 0, { &outcome_enum } } };
1130
1131 static const struct tvec_vardef *core_findvar
1132   (struct tvec_state *tv, const char *name, void **ctx_out, void *ctx)
1133 {
1134   if (STRCMP(name, ==, "@outcome"))
1135     { *ctx_out = ctx; return (&outcome_vardef); }
1136   else
1137     return (0);
1138 }
1139
1140 /* --- @tvec_read@ --- *
1141  *
1142  * Arguments:   @struct tvec_state *tv@ = test-vector state
1143  *              @const char *infile@ = the name of the input file
1144  *              @FILE *fp@ = stream to read from
1145  *
1146  * Returns:     Zero on success, %$-1$% on error.
1147  *
1148  * Use:         Read test vector data from @fp@ and exercise test functions.
1149  *              THe return code doesn't indicate test failures: it's only
1150  *              concerned with whether there were problems with the input
1151  *              file or with actually running the tests.
1152  */
1153
1154 int tvec_read(struct tvec_state *tv, const char *infile, FILE *fp)
1155 {
1156   dstr d = DSTR_INIT;
1157   const struct tvec_test *const *tt;
1158   const struct tvec_env *env;
1159   const struct tvec_regdef *rd;
1160   const struct tvec_vardef *vd = 0; void *varctx;
1161   struct tvec_reg *r = 0, rbuf, *r_alloc = 0; size_t rsz = 0;
1162   struct groupstate g = GROUPSTATE_INIT;
1163   int ch, rc = 0;
1164
1165   /* Set the initial location. */
1166   tv->infile = infile; tv->lno = 1; tv->fp = fp; tv->f |= TVSF_NEXT;
1167
1168   for (;;) {
1169
1170     /* Get the next character and dispatch.  Note that we're always at the
1171      * start of a line here.
1172      */
1173     assert(tv->f&TVSF_NEXT);
1174     tv->f &= ~TVSF_NEXT; ch = getc(tv->fp);
1175     switch (ch) {
1176
1177       case EOF:
1178         /* End of the file.  Exit the loop. */
1179
1180         goto end;
1181
1182       case '[':
1183         /* A test group header. */
1184
1185         /* End the current group, if there is one. */
1186         end_test_group(tv, &g);
1187
1188         /* Read the group name.  There may be leading and trailing
1189          * whitespace.
1190          */
1191         tvec_skipspc(tv);
1192         DRESET(&d); readword(tv, &d, "];", "group name");
1193         tvec_skipspc(tv);
1194         ch = getc(tv->fp); if (ch != ']') tvec_syntax(tv, ch, "`]'");
1195
1196         /* Find the matching test definition. */
1197         for (tt = tv->cfg.tests; *tt; tt++)
1198           if (STRCMP(d.buf, ==, (*tt)->name)) goto found_test;
1199
1200         /* There wasn't one.  Report the error.  Muffle errors about the
1201          * contents of this section because they won't be interesting.
1202          */
1203         tvec_error(tv, "unknown test group `%s'", d.buf);
1204         tv->f |= TVSF_MUFFLE; goto flush_line;
1205
1206       found_test:
1207         /* Eat trailing whitespace and comments. */
1208         flush_line(tv, 0);
1209
1210         /* Set up the new test group. */
1211         tv->test = *tt; begin_test_group(tv, &g);
1212         break;
1213
1214       case '\n':
1215         /* A newline, so this was a completely empty line.  Advance the line
1216          * counter, and run the current test.
1217          */
1218
1219         tv->lno++; tv->f |= TVSF_NEXT;
1220         if (tv->f&TVSF_OPEN) check(tv, &g);
1221         break;
1222
1223       case ';':
1224         /* A semicolon.  Skip the comment. */
1225
1226         flush_line(tv, FF_ALLOWANY);
1227         break;
1228
1229       default:
1230         /* Something else. */
1231
1232         if (isspace(ch)) {
1233           /* Whitespace.  Skip and see what we find. */
1234
1235           tvec_skipspc(tv); ch = getc(tv->fp);
1236
1237           /* If the file ends, then we're done.  If we find a comment then we
1238            * skip it.  If there's some non-whitespace, then report an error.
1239            * Otherwise the line was effectively blank, so run the test.
1240            */
1241           if (ch == EOF) goto end;
1242           else if (ch == ';') flush_line(tv, FF_ALLOWANY);
1243           else if (flush_line(tv, 0)) rc = -1;
1244           else check(tv, &g);
1245         } else {
1246           /* Some non-whitespace thing. */
1247
1248           /* If there's no test, then report an error.  Set the muffle flag,
1249            * because there's no point in complaining about every assignment
1250            * in this block.
1251            */
1252           if (!tv->test) {
1253             if (!(tv->f&TVSF_MUFFLE)) tvec_error(tv, "no current test");
1254             tv->f |= TVSF_MUFFLE; goto flush_line;
1255           }
1256
1257           /* Put the character back and read a word, which ought to be a
1258            * register name.
1259            */
1260           ungetc(ch, tv->fp);
1261           DRESET(&d);
1262           if (readword(tv, &d, "=:*;", "register name"))
1263             goto flush_line;
1264
1265           /* Open the test.  This is syntactically a paragraph of settings,
1266            * so it's fair to report on missing register assignments.
1267            */
1268           open_test(tv);
1269
1270           /* See what sort of thing we have found. */
1271           if (d.buf[0] == '@') {
1272             /* A special register assignment.  */
1273
1274             env = tv->test->env;
1275
1276             /* Find a variable definition. */
1277             vd = core_findvar(tv, d.buf, &varctx, &g);
1278               if (vd) goto found_var;
1279             if (env && env->findvar) {
1280               vd = env->findvar(tv, d.buf, &varctx, g.ctx);
1281                 if (vd) goto found_var;
1282             }
1283             tvec_unkregerr(tv, d.buf); goto flush_line;
1284           found_var:
1285             rd = &vd->def;
1286           } else {
1287             /* A standard register. */
1288
1289             /* Find the definition. */
1290             for (rd = tv->test->regs; rd->name; rd++)
1291               if (STRCMP(rd->name, ==, d.buf)) goto found_reg;
1292             tvec_error(tv, "unknown register `%s' for test `%s'",
1293                        d.buf, tv->test->name);
1294             goto flush_line;
1295           found_reg:
1296
1297             /* Complain if the register is already set. */
1298             r = TVEC_REG(tv, in, rd->i);
1299             if (r->f&TVRF_SEEN)
1300               { tvec_dupregerr(tv, rd->name); goto flush_line; }
1301             else if (r->f&TVRF_SYNTH)
1302               { tvec_synthregerr(tv, rd->name); goto flush_line; }
1303           }
1304
1305           /* Now there should be a separator. */
1306           tvec_skipspc(tv); ch = getc(tv->fp);
1307
1308           if (ch == '*') {
1309             /* Register explicitly marked unset. */
1310
1311             if (vd) {
1312               tvec_error(tv, "can't unset special variables");
1313               goto flush_line;
1314             }
1315             if (!(rd->f&(TVRF_OPT | TVRF_UNSET))) {
1316               tvec_error(tv, "register `%s' must be assigned "
1317                          "a value in test `%s'", rd->name, tv->test->name);
1318               goto flush_line;
1319             }
1320             r->f |= TVRF_SEEN;
1321             if (flush_line(tv, 0)) goto bad;
1322           } else {
1323             /* Common case of a proper assignment. */
1324
1325             /* We must have a separator. */
1326             if (ch != '=' && ch != ':')
1327               { tvec_syntax(tv, ch, "`=', `:', or `*'"); goto flush_line; }
1328             tvec_skipspc(tv);
1329
1330             if (!vd) {
1331               /* An ordinary register.  Parse a value and mark the register
1332                * as live.
1333                */
1334
1335               if (rd->ty->parse(&r->v, rd, tv)) goto flush_val;
1336               if (!(tv->f&TVSF_NEXT) && flush_to_next(tv, 0)) goto bad;
1337               r->f |= TVRF_LIVE | TVRF_SEEN;
1338             } else {
1339               /* A special register defined by an environment. */
1340
1341               /* Set up the register. */
1342               if (vd->regsz <= sizeof(rbuf))
1343                 r = &rbuf;
1344               else {
1345                 GROWBUF_REPLACE(size_t, tv->a, r_alloc, rsz, vd->regsz,
1346                                 8*sizeof(void *), 1);
1347                 r = r_alloc;
1348               }
1349
1350               /* Read and set the value. */
1351               rd->ty->init(&r->v, rd);
1352               if (rd->ty->parse(&r->v, rd, tv)) goto flush_val;
1353               if (!(tv->f&TVSF_NEXT) && flush_to_next(tv, 0)) goto bad;
1354               if (!(tv->f&TVSF_SKIP) && vd->setvar(tv, d.buf, &r->v, varctx))
1355                 goto bad;
1356
1357               /* Clean up. */
1358               rd->ty->release(&r->v, &vd->def); vd = 0;
1359             }
1360           }
1361         }
1362         break;
1363     }
1364     continue;
1365
1366     /* General parse-failure handlers.  Skip to the next line or value and
1367      * remember that things didn't go so well.
1368      */
1369   flush_line:
1370     flush_line(tv, FF_ALLOWANY); goto bad;
1371   flush_val:
1372     flush_to_next(tv, FF_ALLOWANY); goto bad;
1373   bad:
1374     if (vd) { vd->def.ty->release(&r->v, &vd->def); vd = 0; }
1375     rc = -1;
1376   }
1377
1378   /* We reached the end.  If that was actually an I/O error then report it.
1379    */
1380   if (ferror(tv->fp))
1381     { tvec_error(tv, "error reading input: %s", strerror(errno)); rc = -1; }
1382
1383 end:
1384   /* Process the final test, if there was one, and wrap up the final
1385    * group.
1386    */
1387   end_test_group(tv, &g);
1388
1389   /* Clean up. */
1390   tv->infile = 0; tv->fp = 0;
1391   dstr_destroy(&d);
1392   x_free(tv->a, r_alloc);
1393   return (rc);
1394
1395 #undef rlive
1396 }
1397
1398 /*----- Session lifecycle -------------------------------------------------*/
1399
1400 /* Fakery for ad-hoc testing. */
1401 static const struct tvec_regdef no_regs = { 0, 0, 0, 0, { 0 } };
1402 static void fakefn(const struct tvec_reg *in, struct tvec_reg *out, void *p)
1403   { assert(!"fake test function"); }
1404
1405 /* --- @tvec_begin@ --- *
1406  *
1407  * Arguments:   @struct tvec_state *tv_out@ = state structure to fill in
1408  *              @const struct tvec_config *config@ = test configuration
1409  *              @struct tvec_output *o@ = output driver
1410  *
1411  * Returns:     ---
1412  *
1413  * Use:         Initialize a state structure ready to do some testing.  The
1414  *              test state takes ownership of the output driver: @tvec_end@
1415  *              will destroy it.
1416  */
1417
1418 void tvec_begin(struct tvec_state *tv_out,
1419                 const struct tvec_config *config,
1420                 struct tvec_output *o)
1421 {
1422   const struct tvec_test *t, *const *t0, *const *t1;
1423   const struct tvec_regdef *rd0, *rd1;
1424   unsigned i;
1425   int bad;
1426
1427   /* General setup. */
1428   tv_out->f = 0;
1429   tv_out->a = arena_global;
1430
1431   /* Run sanity checks on the test configuration. */
1432   bad = 0;
1433   if (config->nrout > config->nreg) {
1434     fprintf(stderr, "%s (mLib TVEC): nrout (%u) > nreg (%u)\n",
1435             QUIS, config->nrout, config->nreg);
1436     bad = 1;
1437   }
1438   if (config->tests)
1439     for (t0 = config->tests; *t0; t0++) {
1440       t = *t0;
1441       for (t1 = config->tests; t1 < t0; t1++) {
1442         if (STRCMP(t->name, ==, (*t1)->name)) {
1443           fprintf(stderr, "%s (mLib TVEC): duplicate test group `%s'\n",
1444                   QUIS, t->name);
1445           bad = 1;
1446         }
1447         for (rd0 = t->regs; rd0->name; rd0++) {
1448           if (rd0->i >= config->nreg) {
1449             fprintf(stderr, "%s (mLib TVEC): register `%s' "
1450                     "index %u >= nreg (%u) in test group `%s'\n",
1451                     QUIS, rd0->name, rd0->i, config->nreg, t->name);
1452             bad = 1;
1453           }
1454           for (rd1 = t->regs; rd1 < rd0; rd1++) {
1455             if (rd0->i == rd1->i) {
1456               fprintf(stderr, "%s (mLib TVEC): duplicate register index %u "
1457                       "(names `%s' and `%s') in test group `%s'\n",
1458                       QUIS, rd0->i, rd0->name, rd1->name, t->name);
1459               bad = 1;
1460             }
1461             if (STRCMP(rd0->name, ==, rd1->name)) {
1462               fprintf(stderr, "%s (mLib TVEC): duplicate register name `%s' "
1463                       "in test group `%s'\n",
1464                       QUIS, rd0->name, t->name);
1465               bad = 1;
1466             }
1467           }
1468         }
1469       }
1470     }
1471   if (bad) abort();
1472
1473   /* Test group and register initialization. */
1474   if (config->tests) {
1475     /* Standard initialization for file-directed testing. */
1476
1477     tv_out->cfg = *config;
1478     tv_out->in = x_allocv(tv_out->a, tv_out->cfg.nreg, tv_out->cfg.regsz);
1479     tv_out->out = x_allocv(tv_out->a, tv_out->cfg.nrout, tv_out->cfg.regsz);
1480     for (i = 0; i < tv_out->cfg.nreg; i++) {
1481       TVEC_REG(tv_out, in, i)->f = 0;
1482       if (i < tv_out->cfg.nrout) TVEC_REG(tv_out, out, i)->f = 0;
1483     }
1484   } else {
1485     /* Ad-hoc testing. */
1486
1487     tv_out->adhoc_test.name = "<unset>";
1488     tv_out->adhoc_test.regs = &no_regs;
1489     tv_out->adhoc_test.env = 0;
1490     tv_out->adhoc_test.fn = fakefn;
1491     tv_out->adhoc_tests[0] = &tv_out->adhoc_test; tv_out->adhoc_tests[1] = 0;
1492     tv_out->in = tv_out->out = 0;
1493     tv_out->cfg.tests = tv_out->adhoc_tests;
1494     tv_out->cfg.nreg = tv_out->cfg.nrout = tv_out->cfg.regsz = 0;
1495   }
1496
1497   /* Initialize the outcome scoreboard. */
1498   for (i = 0; i < TVOUT_LIMIT; i++)
1499     tv_out->curr[i] = tv_out->all[i] = tv_out->grps[i] = 0;
1500
1501   /* Set up the output state. */
1502   tv_out->test = 0;
1503   tv_out->infile = 0; tv_out->lno = 0; tv_out->fp = 0;
1504   tv_out->output = o; tv_out->output->ops->bsession(tv_out->output, tv_out);
1505 }
1506
1507 /* --- @tvec_end@ --- *
1508  *
1509  * Arguments:   @struct tvec_state *tv@ = test-vector state
1510  *
1511  * Returns:     A proposed exit code.
1512  *
1513  * Use:         Conclude testing and suggests an exit code to be returned to
1514  *              the calling program.  (The exit code comes from the output
1515  *              driver's @esession@ method.)  The output driver, originally
1516  *              passed to @tvec_begin@ is destroyed.
1517  */
1518
1519 int tvec_end(struct tvec_state *tv)
1520 {
1521   int rc = tv->output->ops->esession(tv->output);
1522
1523   if (tv->test) tvec_releaseregs(tv);
1524   tv->output->ops->destroy(tv->output);
1525   x_free(tv->a, tv->in); x_free(tv->a, tv->out);
1526   return (rc);
1527 }
1528
1529 /*----- Serialization and deserialization ---------------------------------*/
1530
1531 #define FOREACH_CANDIDATE(rd, regs, mask, want, nr)                     \
1532         for (rd = (regs); rd->name; rd++)                               \
1533           if (!(rd->i < (nr) && (rd->f&(mask)) == (want))) /* skip */;  \
1534           else
1535
1536 /* --- @tvec_serialize@ --- *
1537  *
1538  * Arguments:   @const struct tvec_reg *rv@ = vector of registers
1539  *              @buf *b@ = buffer to write on
1540  *              @const struct tvec_regdef *regs@ = vector of register
1541  *                      descriptions, terminated by an entry with a null
1542  *                      @name@ slot
1543  *              @unsigned mask, want@ = flag-based selection
1544  *              @unsigned nr@ = number of entries in the @rv@ vector
1545  *              @size_t regsz@ = true size of each element of @rv@
1546  *
1547  * Returns:     Zero on success, %$-1$% on failure.
1548  *
1549  * Use:         Serialize a collection of register values.
1550  *
1551  *              The serialized output is written to the buffer @b@.  Failure
1552  *              can be caused by running out of buffer space, or a failing
1553  *              type handler.
1554  */
1555
1556 int tvec_serialize(const struct tvec_reg *rv, buf *b,
1557                    const struct tvec_regdef *regs,
1558                    unsigned mask, unsigned want,
1559                    unsigned nr, size_t regsz)
1560 {
1561   unsigned char *bitmap;
1562   size_t i, bitoff, nbits, bitsz;
1563   const struct tvec_regdef *rd;
1564   const struct tvec_reg *r;
1565
1566   nbits = 0; FOREACH_CANDIDATE(rd, regs, mask, want, nr) nbits++;
1567   if (!nbits) return (0);
1568   bitoff = BLEN(b); bitsz = (nbits + 7)/8;
1569
1570   bitmap = buf_get(b, bitsz); if (!bitmap) return (-1);
1571   memset(bitmap, 0, bitsz);
1572   i = 0; FOREACH_CANDIDATE(rd, regs, mask, want, nr) {
1573     r = TVEC_GREG(rv, rd->i, regsz);
1574     if (r->f&TVRF_LIVE) {
1575       bitmap = BBASE(b) + bitoff; bitmap[i/8] |= 1 << i%8;
1576       if (rd->ty->tobuf(b, &r->v, rd)) return (-1);
1577     }
1578     i++;
1579   }
1580   return (0);
1581 }
1582
1583 /* --- @tvec_deserialize@ --- *
1584  *
1585  * Arguments:   @struct tvec_reg *rv@ = vector of registers
1586  *              @buf *b@ = buffer to write on
1587  *              @const struct tvec_regdef *regs@ = vector of register
1588  *                      descriptions, terminated by an entry with a null
1589  *                      @name@ slot
1590  *              @unsigned mask, want@ = flag-based selection
1591  *              @unsigned nr@ = number of entries in the @rv@ vector
1592  *              @size_t regsz@ = true size of each element of @rv@
1593  *
1594  * Returns:     Zero on success, %$-1$% on failure.
1595  *
1596  * Use:         Deserialize a collection of register values.
1597  *
1598  *              The size of the register vector @nr@ and the register
1599  *              definitions @regs@ must match those used when producing the
1600  *              serialization.  For each serialized register value,
1601  *              deserialize and store the value into the appropriate register
1602  *              slot, and set the @TVRF_LIVE@ flag on the register.  See
1603  *              @tvec_serialize@ for a description of the format.
1604  *
1605  *              Failure results only from an input too small for the initial
1606  *              bitmap or a failing register type handler.
1607  */
1608
1609 int tvec_deserialize(struct tvec_reg *rv, buf *b,
1610                      const struct tvec_regdef *regs,
1611                      unsigned mask, unsigned want,
1612                      unsigned nr, size_t regsz)
1613 {
1614   const unsigned char *bitmap;
1615   size_t i, nbits, bitsz;
1616   const struct tvec_regdef *rd;
1617   struct tvec_reg *r;
1618
1619   nbits = 0; FOREACH_CANDIDATE(rd, regs, mask, want, nr) nbits++;
1620   if (!nbits) return (0);
1621   bitsz = (nbits + 7)/8;
1622
1623   bitmap = buf_get(b, bitsz); if (!bitmap) return (-1);
1624   i = 0; FOREACH_CANDIDATE(rd, regs, mask, want, nr) {
1625     if (bitmap[i/8]&(1 << i%8)) {
1626       r = TVEC_GREG(rv, rd->i, regsz);
1627       if (rd->ty->frombuf(b, &r->v, rd)) return (-1);
1628       r->f |= TVRF_LIVE;
1629     }
1630     i++;
1631   }
1632   return (0);
1633 }
1634
1635 #undef FOREACH_CANDIDATE
1636
1637 /*----- Ad-hoc testing ----------------------------------------------------*/
1638
1639 /* Configuration for ad-hoc testing. */
1640 const struct tvec_config tvec_adhocconfig = { 0, 0, 0, 0 };
1641
1642 /* --- @tvec_begingroup@ --- *
1643  *
1644  * Arguments:   @struct tvec_state *tv@ = test-vector state
1645  *              @const char *name@ = name for this test group
1646  *              @const char *file@, @unsigned @lno@ = calling file and line
1647  *
1648  * Returns:     ---
1649  *
1650  * Use:         Begin an ad-hoc test group with the given name.  The @file@
1651  *              and @lno@ can be anything, but it's usually best if they
1652  *              refer to the source code performing the test: the macro
1653  *              @TVEC_BEGINGROUP@ does this automatically.
1654  */
1655
1656 void tvec_begingroup(struct tvec_state *tv, const char *name,
1657                      const char *file, unsigned lno)
1658 {
1659   tv->adhoc_test.name = name; tv->test = &tv->adhoc_test;
1660   tv->infile = file; tv->lno = tv->test_lno = lno;
1661   begin_test_group(tv, 0);
1662 }
1663
1664 /* --- @tvec_endgroup@ --- *
1665  *
1666  * Arguments:   @struct tvec_state *tv@ = test-vector state
1667  *
1668  * Returns:     ---
1669  *
1670  * Use:         End an ad-hoc test group.  The statistics are updated and the
1671  *              outcome is reported to the output formatter.
1672  */
1673
1674 void tvec_endgroup(struct tvec_state *tv)
1675 {
1676   if (!(tv->f&TVSF_SKIP)) report_group(tv);
1677   tv->test = 0;
1678 }
1679
1680 /* --- @tvec_begintest@ --- *
1681  *
1682  * Arguments:   @struct tvec_state *tv@ = test-vector state
1683  *              @const char *file@, @unsigned @lno@ = calling file and line
1684  *
1685  * Returns:     ---
1686  *
1687  * Use:         Begin an ad-hoc test case.  The @file@ and @lno@ can be
1688  *              anything, but it's usually best if they refer to the source
1689  *              code performing the test: the macro @TVEC_BEGINGROUP@ does
1690  *              this automatically.
1691  */
1692
1693 void tvec_begintest(struct tvec_state *tv, const char *file, unsigned lno)
1694 {
1695   tv->infile = file; tv->lno = tv->test_lno = lno;
1696   open_test(tv); begin_test(tv);
1697 }
1698
1699 /* --- @tvec_withtest_setup@, @tvec_withttest_teardown@ --- *
1700  *
1701  * Arguments:   @struct tvec_state *tv@ = test-vector state
1702  *              @struct tvec_withtest *wt@ = structure for internal state
1703  *              @const char *file@, @unsigned lno@ = file and line
1704  *                      information to set
1705  *
1706  * Returns:     ---
1707  *
1708  * Use:         These functions bracket an adhoc test, or a piece of a test.
1709  *
1710  *              The @tvec_withtest_setup@ function begins a new test if one
1711  *              is not currently active, and (unconditionally) sets the
1712  *              test-vector state's filename and line number to the values
1713  *              given, saving some information in @*wt@ so that everything
1714  *              can be restored later.
1715  *
1716  *              The @tvec_withtest_teardown@ function restores the previous
1717  *              filename and line number, and ends a new test if
1718  *              @tvec_withtest_setup@ begun one.  It also unconditionally
1719  *              clears the register definitions and register-vector pointers.
1720  *
1721  *              These are the underlying functionality for the
1722  *              @TVEC_WITHTEST_...@ family of macros.
1723  */
1724
1725 void tvec_withtest_setup(struct tvec_state *tv, struct tvec_withtest *wt,
1726                                 const char *file, unsigned lno)
1727 {
1728   wt->f = 0;
1729
1730   if (!(tv->f&TVSF_OPEN))
1731     { wt->f |= ACF_FRESH; tvec_begintest(tv, file, lno); }
1732
1733   wt->saved_file = tv->infile; if (file) tv->infile = file;
1734   wt->saved_lno = tv->test_lno; if (file) tv->test_lno = lno;
1735 }
1736
1737 void tvec_withtest_teardown(struct tvec_state *tv, struct tvec_withtest *wt)
1738 {
1739   tv->adhoc_test.regs = &no_regs;
1740   tv->in = tv->out = 0; tv->cfg.nrout = tv->cfg.nreg = 0;
1741   tv->infile = wt->saved_file; tv->test_lno = wt->saved_lno;
1742
1743   if (wt->f&ACF_FRESH) tvec_endtest(tv);
1744 }
1745
1746 /* --- @tvec_claim@, @tvec_claim_v@, @TVEC_CLAIM@ --- *
1747  *
1748  * Arguments:   @struct tvec_state *tv@ = test-vector state
1749  *              @int ok@ = a flag
1750  *              @const char *file@, @unsigned @lno@ = calling file and line
1751  *              @const char *msg@, @va_list *ap@ = message to report on
1752  *                      failure
1753  *
1754  * Returns:     The value @ok@.
1755  *
1756  * Use:         Check that a claimed condition holds, as (part of) a test.
1757  *              If no test case is underway (i.e., if @TVSF_OPEN@ is reset in
1758  *              @tv->f@), then a new test case is begun and ended.  The
1759  *              @file@ and @lno@ are passed to the output formatter to be
1760  *              reported in case of a failure.  If @ok@ is nonzero, then
1761  *              nothing else happens; so, in particular, if @tvec_claim@
1762  *              established a new test case, then the test case succeeds.  If
1763  *              @ok@ is zero, then a failure is reported, quoting @msg@.
1764  *
1765  *              The @TVEC_CLAIM@ macro is similar, only it (a) identifies the
1766  *              file and line number of the call site automatically, and (b)
1767  *              implicitly quotes the source text of the @ok@ condition in
1768  *              the failure message.
1769  */
1770
1771 int tvec_claim_v(struct tvec_state *tv, int ok,
1772                  const char *file, unsigned lno,
1773                  const char *msg, va_list *ap)
1774 {
1775   TVEC_WITHTEST_DECLS;
1776
1777   TVEC_WITHTEST_LOC(tv, file, lno)
1778     if (!ok) tvec_fail_v(tv, msg, ap);
1779   return (ok);
1780 }
1781
1782 int tvec_claim(struct tvec_state *tv, int ok,
1783                const char *file, unsigned lno, const char *msg, ...)
1784 {
1785   va_list ap;
1786
1787   va_start(ap, msg); tvec_claim_v(tv, ok, file, lno, msg, &ap); va_end(ap);
1788   return (ok);
1789 }
1790
1791 /* --- @tvec_claimeq@ --- *
1792  *
1793  * Arguments:   @struct tvec_state *tv@ = test-vector state
1794  *              @const struct tvec_regty *ty@ = register type
1795  *              @const union tvec_misc *arg@ = register type argument
1796  *              @const struct tvec_reg *rval, *rref@ = computed and reference
1797  *                      registers
1798  *              @const char *file@, @unsigned @lno@ = calling file and line
1799  *              @const char *expr@ = the expression to quote on failure
1800  *
1801  * Returns:     Nonzero if the input and output values of register 0 are
1802  *              equal, zero if they differ.
1803  *
1804  * Use:         Check that the (computed) value of @rval@ is equal to the
1805  *              (reference) value of @rref@ (according to the register type
1806  *              @ty@).  As for @tvec_claim@ above, a test case is
1807  *              automatically begun and ended if none is already underway.
1808  *              If the values are unequal, then @tvec_fail@ is called,
1809  *              quoting @expr@, and the mismatched values are dumped.
1810  *
1811  *              The registers must have their @TVRF_LIVE@ flags set.
1812  *
1813  *              This function is not expected to be called directly, but
1814  *              through type-specific wrapper functions or macros such as
1815  *              @TVEC_CLAIMEQ_INT@.
1816  */
1817
1818 int tvec_claimeq(struct tvec_state *tv,
1819                  const struct tvec_regty *ty, const union tvec_misc *arg,
1820                  const struct tvec_reg *rval, const struct tvec_reg *rref,
1821                  const char *file, unsigned lno, const char *expr)
1822 {
1823   TVEC_WITHTEST_DECLS;
1824   struct tvec_regdef regs[2];
1825   int ok;
1826
1827   assert(rval->f&TVRF_LIVE); tv->in = UNCONST(struct tvec_reg, rref);
1828   assert(rref->f&TVRF_LIVE); tv->out = UNCONST(struct tvec_reg, rval);
1829   tv->cfg.nrout = tv->cfg.nreg = 1;
1830
1831   regs[0].name = "value"; regs[0].i = 0;
1832   regs[0].ty = ty; regs[0].f = 0;
1833   if (arg) regs[0].arg = *arg;
1834   else regs[0].arg.p = 0;
1835
1836   regs[1].name = 0;
1837   tv->adhoc_test.regs = regs;
1838
1839   TVEC_WITHTEST_LOC(tv, file, lno) {
1840     ok = ty->eq(&rref->v, &rval->v, &regs[0]);
1841     if (!ok)
1842       { tvec_fail(tv, "%s", expr); tvec_mismatch(tv, TVMF_IN | TVMF_OUT); }
1843   }
1844   return (ok);
1845 }
1846
1847 /*----- That's all, folks -------------------------------------------------*/