chiark / gitweb /
more automation of test logic
[disorder] / tests / alltests
1 #! /usr/bin/env python
2 #
3 # This file is part of DisOrder.
4 # Copyright (C) 2007 Richard Kettlewell
5 #
6 # This program is free software; you can redistribute it and/or modify
7 # it under the terms of the GNU General Public License as published by
8 # the Free Software Foundation; either version 2 of the License, or
9 # (at your option) any later version.
10 #
11 # This program is distributed in the hope that it will be useful, but
12 # WITHOUT ANY WARRANTY; without even the implied warranty of
13 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14 # General Public License for more details.
15 #
16 # You should have received a copy of the GNU General Public License
17 # along with this program; if not, write to the Free Software
18 # Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA 02111-1307
19 # USA
20 #
21 import sys,re,os.path,os
22
23 # Parse the makefile in the current directory to identify the source directory
24 top_srcdir = None
25 for l in file("Makefile"):
26     r = re.search("^top_srcdir *= *(.*)$",  l)
27     if r:
28         top_srcdir = r.group(1)
29         break
30 if not top_srcdir:
31     fatal("cannot identify source directory")
32
33 # Make sure that the test directory is on the module search path (so we can
34 # find dtest and the tests themselves)
35 testdir = os.path.join(top_srcdir, "tests")
36 sys.path.insert(0, testdir)
37 import dtest
38
39 # The tests are all the *.py files in the test source directory that
40 # call dtest.run
41 tests = []
42 for f in os.listdir(testdir):
43     r = re.search("^(.*)\\.py$", f)
44     if r is not None:
45         isTest = False
46         base = r.group(1)
47         for l in file(os.path.join(testdir, f)):
48             r = re.search("dtest\\.run", l)
49             if r is not None:
50                 isTest = True
51                 break
52         if isTest:
53             tests.append(base)
54 tests.sort()                            # let's have a consistent order
55
56 for test in tests:
57     print "Test '%s'" % test
58     m = __import__(test)
59     dtest.run(getattr(m, "test"),
60               setup=getattr(m, "setup", None),
61               report=False,
62               name=test)
63
64 print "%d tests" % dtest.tests
65 if dtest.failures:
66     print "%d failures" % dtest.failures
67     sys.exit(1)
68 else:
69     print "All tests OK"