New TESTS variable to run a subset of tests in parallel.
[deliverable/binutils-gdb.git] / gdb / testsuite / Makefile.in
index 29079d4b84f79f0e465ab205d34f92aa76b6c98d..0020a0ff8e32eeef0f935fe0158748f79e9d251e 100644 (file)
@@ -1,42 +1,43 @@
 # Makefile for regression testing the GNU debugger.
-# Copyright 1992, 1993, 1994, 1995, 1996, 1998, 1999, 2000
-# Free Software Foundation, Inc.
+# Copyright 1992-2014 Free Software Foundation, Inc.
 
 # This file is part of GDB.
 
-# GDB is free software; you can redistribute it and/or modify
+# This program is free software; you can redistribute it and/or modify
 # it under the terms of the GNU General Public License as published by
-# the Free Software Foundation; either version 2, or (at your option)
-# any later version.
-
-# GDB is distributed in the hope that it will be useful,
+# the Free Software Foundation; either version 3 of the License, or
+# (at your option) any later version.
+#
+# This program is distributed in the hope that it will be useful,
 # but WITHOUT ANY WARRANTY; without even the implied warranty of
 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 # GNU General Public License for more details.
-
+#
 # You should have received a copy of the GNU General Public License
-# along with this program; if not, write to the Free Software
-# Foundation, Inc., 59 Temple Place - Suite 330, Boston, MA 02111-1307, USA.
+# along with this program.  If not, see <http://www.gnu.org/licenses/>.
 
 VPATH = @srcdir@
 srcdir = @srcdir@
 prefix = @prefix@
 exec_prefix = @exec_prefix@
+abs_builddir = @abs_builddir@
 
-host_alias = @host_alias@
-target_alias = @target_alias@
+target_alias = @target_noncanonical@
 program_transform_name = @program_transform_name@
 build_canonical = @build@
 host_canonical = @host@
 target_canonical = @target@
-target_cpu = @gdb_target_cpu@
 
 SHELL = @SHELL@
 EXEEXT = @EXEEXT@
 SUBDIRS = @subdirs@
 RPATH_ENVVAR = @RPATH_ENVVAR@
-ALL_SUBDIRS = gdb.arch gdb.asm gdb.base gdb.c++ gdb.disasm gdb.java gdb.mi \
-       gdb.threads gdb.trace $(SUBDIRS)
+ALL_SUBDIRS = gdb.ada gdb.arch gdb.asm gdb.base gdb.btrace gdb.cell gdb.cp \
+       gdb.disasm gdb.dlang gdb.dwarf2 gdb.fortran gdb.gdb gdb.go gdb.hp \
+       gdb.java gdb.linespec gdb.mi gdb.modula2 gdb.multi \
+       gdb.objc gdb.opencl gdb.opt gdb.pascal gdb.python gdb.server \
+       gdb.stabs gdb.reverse gdb.threads gdb.trace gdb.xml \
+       $(SUBDIRS)
 
 EXPECT = `if [ -f $${rootme}/../../expect/expect ] ; then \
           echo $${rootme}/../../expect/expect ; \
@@ -46,6 +47,8 @@ RUNTEST = $(RUNTEST_FOR_TARGET)
 
 RUNTESTFLAGS =
 
+FORCE_PARALLEL =
+
 RUNTEST_FOR_TARGET = `\
   if [ -f $${srcdir}/../../dejagnu/runtest ]; then \
     echo $${srcdir}/../../dejagnu/runtest; \
@@ -53,7 +56,7 @@ RUNTEST_FOR_TARGET = `\
     if [ "$(host_canonical)" = "$(target_canonical)" ]; then \
       echo runtest; \
     else \
-      t='$(program_transform_name)'; echo runtest | sed -e '' $$t; \
+      t='$(program_transform_name)'; echo runtest | sed -e $$t; \
     fi; \
   fi`
 
@@ -89,6 +92,8 @@ INFODIRS=doc
 info:
 install-info:
 dvi:
+pdf:
+install-pdf:
 html:
 install-html:
 
@@ -96,7 +101,11 @@ install:
 
 uninstall: force
 
-site.exp: ./config.status Makefile
+# Use absolute `site.exp' path everywhere to suppress VPATH lookups for it.
+# Bare `site.exp' is used as a target here if user requests it explicitly.
+# $(RUNTEST) is looking up `site.exp' only in the current directory.
+
+$(abs_builddir)/site.exp site.exp: ./config.status Makefile
        @echo "Making a new config file..."
        -@rm -f ./tmp?
        @touch site.exp
@@ -104,13 +113,13 @@ site.exp: ./config.status Makefile
        @echo "## these variables are automatically generated by make ##" > ./tmp0
        @echo "# Do not edit here. If you wish to override these values" >> ./tmp0
        @echo "# add them to the last section" >> ./tmp0
-       @echo "set host_alias $(host_alias)" >> ./tmp0
        @echo "set host_triplet ${host_canonical}" >> ./tmp0
        @echo "set target_alias $(target_alias)" >> ./tmp0
        @echo "set target_triplet ${target_canonical}" >> ./tmp0
        @echo "set build_triplet ${build_canonical}" >> ./tmp0
        @echo "set srcdir ${srcdir}" >> ./tmp0
        @echo "set tool gdb" >> ./tmp0
+       @echo 'source $${srcdir}/lib/append_gdb_boards_dir.exp' >> ./tmp0
        @echo "## All variables above are generated by configure. Do Not Edit ##" >> ./tmp0
                @cat ./tmp0 > site.exp
        @cat site.bak | sed \
@@ -119,9 +128,27 @@ site.exp: ./config.status Makefile
 
 installcheck:
 
-check: site.exp all just-check
+# See whether -j was given to make.  Either it was given with no
+# arguments, and appears as "j" in the first word, or it was given an
+# argument and appears as "-j" in a separate word.
+@GMAKE_TRUE@saw_dash_j = $(or $(findstring j,$(firstword $(MAKEFLAGS))),$(filter -j,$(MAKEFLAGS)))
+
+# For GNU make, try to run the tests in parallel if any -j option is
+# given.  If RUNTESTFLAGS is not empty, then by default the tests will
+# be serialized.  This can be overridden by setting FORCE_PARALLEL to
+# any non-empty value.  For a non-GNU make, do not parallelize.
+@GMAKE_TRUE@CHECK_TARGET = $(if $(FORCE_PARALLEL),check-parallel,$(if $(RUNTESTFLAGS),check-single,$(if $(saw_dash_j),check-parallel,check-single)))
+@GMAKE_FALSE@CHECK_TARGET = check-single
 
-just-check:
+# Note that we must resort to a recursive make invocation here,
+# because GNU make 3.82 has a bug preventing MAKEFLAGS from being used
+# in conditions.
+check: all $(abs_builddir)/site.exp
+       $(MAKE) $(CHECK_TARGET)
+
+# All the hair to invoke dejagnu.  A given invocation can just append
+# $(RUNTESTFLAGS)
+DO_RUNTEST = \
        rootme=`pwd`; export rootme; \
        srcdir=${srcdir} ; export srcdir ; \
        EXPECT=${EXPECT} ; export EXPECT ; \
@@ -131,34 +158,78 @@ just-check:
        if [ -f $${rootme}/../../expect/expect ] ; then  \
          TCL_LIBRARY=$${srcdir}/../../tcl/library ; \
          export TCL_LIBRARY ; fi ; \
-       $(RUNTEST) $(RUNTESTFLAGS) 
-
-subdir_do: force
-       @for i in $(DODIRS); do \
-               if [ -d ./$$i ] ; then \
-                       if (rootme=`pwd`/ ; export rootme ; \
-                           rootsrc=`cd $(srcdir); pwd`/ ; export rootsrc ; \
-                               cd ./$$i; \
-                               $(MAKE) $(TARGET_FLAGS_TO_PASS) $(DO)) ; then true ; \
-                       else exit 1 ; fi ; \
-               else true ; fi ; \
-       done
+       $(RUNTEST)
 
-force:;
+# TESTS exists for the user to pass on the command line to easily
+# say "Only run these tests."  With check-single it's not necessary, but
+# with check-parallel there's no other way to (easily) specify a subset
+# of tests.  For consistency we support it for check-single as well.
+# To specify all tests in a subdirectory, use TESTS=gdb.subdir/*.exp.
+# E.g., make check TESTS="gdb.server/*.exp gdb.threads/*.exp".
+@GMAKE_TRUE@TESTS :=
+@GMAKE_FALSE@TESTS =
+
+@GMAKE_TRUE@ifeq ($(strip $(TESTS)),)
+@GMAKE_TRUE@expanded_tests_or_none :=
+@GMAKE_TRUE@else
+@GMAKE_TRUE@expanded_tests := $(patsubst $(srcdir)/%,%,$(wildcard $(addprefix $(srcdir)/,$(TESTS))))
+@GMAKE_TRUE@expanded_tests_or_none := $(or $(expanded_tests),no-matching-tests-found)
+@GMAKE_TRUE@endif
+@GMAKE_FALSE@expanded_tests_or_none = $(TESTS)
+
+check-single:
+       $(DO_RUNTEST) $(RUNTESTFLAGS) $(expanded_tests_or_none)
 
-subdirs:
-       for dir in ${ALL_SUBDIRS} ; \
-       do \
-               echo "$$dir:" ; \
-               if [ -d $$dir ] ; then \
-                       (rootme=`pwd`/ ; export rootme ; \
-                        rootsrc=`cd $(srcdir); pwd`/ ; export rootsrc ; \
-                        cd $$dir; $(MAKE) $(TARGET_FLAGS_TO_PASS)); \
-               fi; \
-       done
+check-parallel:
+       -rm -rf cache outputs temp
+       $(MAKE) -k do-check-parallel; \
+       $(SHELL) $(srcdir)/dg-extract-results.sh \
+         `find outputs -name gdb.sum -print` > gdb.sum; \
+       $(SHELL) $(srcdir)/dg-extract-results.sh -L \
+         `find outputs -name gdb.log -print` > gdb.log
+       @sed -n '/=== gdb Summary ===/,$$ p' gdb.sum
+
+# Turn a list of .exp files into "check/" targets.  Only examine .exp
+# files appearing in a gdb.* directory -- we don't want to pick up
+# lib/ by mistake.  For example, gdb.linespec/linespec.exp becomes
+# check/gdb.linespec/linespec.exp.  The list is generally sorted
+# alphabetically, but we take a few tests known to be slow and push
+# them to the front of the list to try to lessen the overall time
+# taken by the test suite -- if one of these tests happens to be run
+# late, it will cause the overall time to increase.
+@GMAKE_TRUE@ifeq ($(strip $(TESTS)),)
+slow_tests = gdb.base/break-interp.exp gdb.base/interp.exp \
+       gdb.base/multi-forks.exp
+@GMAKE_TRUE@all_tests := $(shell cd $(srcdir) && find gdb.* -name '*.exp' -print)
+@GMAKE_TRUE@reordered_tests := $(slow_tests) $(filter-out $(slow_tests),$(all_tests))
+@GMAKE_TRUE@TEST_TARGETS := $(addprefix check/,$(reordered_tests))
+@GMAKE_TRUE@else
+@GMAKE_TRUE@TEST_TARGETS := $(addprefix check/,$(expanded_tests_or_none))
+@GMAKE_TRUE@endif
+
+do-check-parallel: $(TEST_TARGETS)
+       @:
+
+@GMAKE_TRUE@check/%.exp:
+@GMAKE_TRUE@   -mkdir -p outputs/$*
+@GMAKE_TRUE@   @$(DO_RUNTEST) GDB_PARALLEL=yes --outdir=outputs/$* $*.exp $(RUNTESTFLAGS)
+
+check/no-matching-tests-found:
+       @echo ""
+       @echo "No matching tests found."
+       @echo ""
+
+check-perf: all $(abs_builddir)/site.exp
+       @if test ! -d gdb.perf; then mkdir gdb.perf; fi
+       $(DO_RUNTEST) --directory=gdb.perf --outdir gdb.perf GDB_PERFTEST_MODE=both $(RUNTESTFLAGS)
+
+force:;
 
 clean mostlyclean:
-       -rm -f *~ core *.o a.out xgdb *.x *.grt
+       -rm -f *~ core *.o a.out xgdb *.x *.grt bigcore.corefile .gdb_history
+       -rm -f core.* *.tf *.cl *.py tracecommandsscript copy1.txt zzz-gdbscript
+       -rm -f *.dwo *.dwp
+       -rm -rf outputs temp cache
        if [ x"${ALL_SUBDIRS}" != x ] ; then \
            for dir in ${ALL_SUBDIRS}; \
            do \
@@ -183,8 +254,12 @@ distclean maintainer-clean realclean: clean
            done ; \
        else true; fi
 
-Makefile : Makefile.in config.status $(host_makefile_frag) $(target_makefile_frag)
+Makefile : Makefile.in config.status $(host_makefile_frag)
        $(SHELL) config.status
 
 config.status: configure
        $(SHELL) config.status --recheck
+
+TAGS: force
+       find $(srcdir) -name '*.exp' -print | \
+           etags --regex='/proc[ \t]+\([^ \t]+\)/\1/' -
This page took 0.026483 seconds and 4 git commands to generate.