]> Pileus Git - ~andy/gtk/blob - Makefile.decl
avoid redundant recursion for executing tests
[~andy/gtk] / Makefile.decl
1 # GTK+ - The GIMP Toolkit
2
3 GTESTER        = gtester                # in $PATH for non-GLIB packages
4 GTESTER_REPORT = gtester-report         # in $PATH for non-GLIB packages
5
6 # initialize variables for unconditional += appending
7 EXTRA_DIST =
8 TEST_PROGS =
9
10 ### testing rules
11
12 # Xvfb based test rules
13 XVFB = Xvfb -ac -noreset -screen 0 800x600x16
14 XIDS = 101 102 103 104 105 106 107 197 199 211 223 227 293 307 308 309 310 311 \
15    491 492 493 494 495 496 497 498 499 500 501 502 503 504 505 506 507 508 509 \
16    991 992 993 994 995 996 997 998 999 1000 1001 1002 1003 1004 1005 1006 1007 \
17   1008 1009 4703 4721 4723 4729 4733 4751 9973 9974 9975 9976 9977 9978 9979 \
18   9980 9981 9982 9983 9984 9985 9986 9987 9988 9989 9990 9991 9992 9993 9994 \
19   9995 9996 9997 9998 9999
20 SKIP_GDKTARGET = \
21         test "$(gdktarget)" != "x11" \
22         && echo "Gtk+Tests:INFO: Skipping GUI tests for non-X11 target."
23 XVFB_START = \
24         ${XVFB} -help 2>/dev/null 1>&2 \
25         && XID=`for id in $(XIDS) ; do test -e /tmp/.X$$id-lock || { echo $$id; exit 0; }; done; exit 1` \
26         && { ${XVFB} :$$XID -screen 0 800x600x16 -nolisten tcp -auth /dev/null >/dev/null 2>&1 & \
27                trap "kill -15 $$! " 0 HUP INT QUIT TRAP USR1 PIPE TERM ; } \
28         || { echo "Gtk+Tests:ERROR: Failed to start Xvfb environment for X11 target tests."; exit 1; } \
29         && DISPLAY=:$$XID && export DISPLAY
30 # call as: $(XVFB_START) && someprogram
31
32 # test: run all tests in cwd and subdirs
33 test: test-cwd test-recurse
34 # test-cwd: run tests in cwd
35 test-cwd: ${TEST_PROGS}
36         @$(SKIP_GDKTARGET) || test -z "${TEST_PROGS}" || { \
37           $(XVFB_START) && { set -e; $(TESTS_ENVIRONMENT) ${GTESTER} --verbose ${TEST_PROGS}; }; \
38         }
39 # test-recurse: run tests in subdirs
40 test-recurse:
41         @ for subdir in $(SUBDIRS) ; do \
42             test "$$subdir" = "." -o "$$subdir" = "po" -o "$$subdir" = "po-properties" || \
43             ( cd $$subdir && $(MAKE) $(AM_MAKEFLAGS) test ) || exit $? ; \
44           done
45 # test-report: run tests in subdirs and generate report
46 # perf-report: run tests in subdirs with -m perf and generate report
47 # full-report: like test-report: with -m perf and -m slow
48 test-report perf-report full-report:    ${TEST_PROGS}
49         @ ignore_logdir=true ; \
50           if test -z "$$GTESTER_LOGDIR" ; then \
51             GTESTER_LOGDIR=`mktemp -d "\`pwd\`/.testlogs-XXXXXX"`; export GTESTER_LOGDIR ; \
52             ignore_logdir=false ; \
53           fi ; \
54           for subdir in $(SUBDIRS) ; do \
55             test "$$subdir" = "." -o "$$subdir" = "po" -o "$$subdir" = "po-properties" || \
56             ( cd $$subdir && $(MAKE) $(AM_MAKEFLAGS) $@ ) || exit $? ; \
57           done ; \
58           $(SKIP_GDKTARGET) || test -z "${TEST_PROGS}" || { \
59             case $@ in \
60             test-report) test_options="-k";; \
61             perf-report) test_options="-k -m=perf";; \
62             full-report) test_options="-k -m=perf -m=slow";; \
63             esac ; \
64             $(XVFB_START) && { \
65               set -e; \
66               if test -z "$$GTESTER_LOGDIR" ; then \
67                 ${GTESTER} --verbose $$test_options -o test-report.xml ${TEST_PROGS} ; \
68               elif test -n "${TEST_PROGS}" ; then \
69                 ${GTESTER} --verbose $$test_options -o `mktemp "$$GTESTER_LOGDIR/log-XXXXXX"` ${TEST_PROGS} ; \
70               fi ; \
71             }; \
72           }; \
73           $$ignore_logdir || { \
74             echo '<?xml version="1.0"?>' > $@.xml ; \
75             echo '<report-collection>'  >> $@.xml ; \
76             for lf in `ls -L "$$GTESTER_LOGDIR"/.` ; do \
77               sed '1,1s/^<?xml\b[^>?]*?>//' <"$$GTESTER_LOGDIR"/"$$lf" >> $@.xml ; \
78             done ; \
79             echo >> $@.xml ; \
80             echo '</report-collection>' >> $@.xml ; \
81             rm -rf "$$GTESTER_LOGDIR"/ ; \
82             ${GTESTER_REPORT} --version 2>/dev/null 1>&2 ; test "$$?" != 0 || ${GTESTER_REPORT} $@.xml >$@.html ; \
83           }
84 .PHONY: test test-cwd test-recurse test-report perf-report full-report
85 # run make test-cwd as part of make check
86 check-local: test-cwd