LCOV - code coverage report
Current view: top level - tests/harness - testsuite.cc (source / functions) Hit Total Coverage
Test: Test Coverage for xapian-core c2b6f1024d3a Lines: 178 341 52.2 %
Date: 2019-05-16 09:13:18 Functions: 17 20 85.0 %
Branches: 127 618 20.6 %

           Branch data     Line data    Source code
       1                 :            : /** @file testsuite.cc
       2                 :            :  * @brief a test suite engine
       3                 :            :  */
       4                 :            : /* Copyright 1999,2000,2001 BrightStation PLC
       5                 :            :  * Copyright 2002 Ananova Ltd
       6                 :            :  * Copyright 2002,2003,2004,2005,2006,2007,2008,2009,2010,2012,2013,2015,2016,2017 Olly Betts
       7                 :            :  * Copyright 2007 Richard Boulton
       8                 :            :  *
       9                 :            :  * This program is free software; you can redistribute it and/or
      10                 :            :  * modify it under the terms of the GNU General Public License as
      11                 :            :  * published by the Free Software Foundation; either version 2 of the
      12                 :            :  * License, or (at your option) any later version.
      13                 :            :  *
      14                 :            :  * This program is distributed in the hope that it will be useful,
      15                 :            :  * but WITHOUT ANY WARRANTY; without even the implied warranty of
      16                 :            :  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
      17                 :            :  * GNU General Public License for more details.
      18                 :            :  *
      19                 :            :  * You should have received a copy of the GNU General Public License
      20                 :            :  * along with this program; if not, write to the Free Software
      21                 :            :  * Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301
      22                 :            :  * USA
      23                 :            :  */
      24                 :            : 
      25                 :            : #include <config.h>
      26                 :            : 
      27                 :            : #include "testsuite.h"
      28                 :            : 
      29                 :            : #ifndef NO_LIBXAPIAN
      30                 :            : # include "backendmanager.h"
      31                 :            : #endif
      32                 :            : #include "fdtracker.h"
      33                 :            : #include "testrunner.h"
      34                 :            : #include "safeunistd.h"
      35                 :            : 
      36                 :            : #ifdef HAVE_VALGRIND
      37                 :            : # include <valgrind/memcheck.h>
      38                 :            : # include <sys/types.h>
      39                 :            : # include "safefcntl.h"
      40                 :            : #endif
      41                 :            : 
      42                 :            : #include <algorithm>
      43                 :            : #include <iomanip>
      44                 :            : #include <iostream>
      45                 :            : #include <set>
      46                 :            : 
      47                 :            : #include <cerrno>
      48                 :            : #include <cfloat> // For DBL_DIG.
      49                 :            : #include <cmath> // For ceil, fabs, log10.
      50                 :            : #include <cstdio>
      51                 :            : #include <cstdlib>
      52                 :            : #include <cstring>
      53                 :            : 
      54                 :            : #include "gnu_getopt.h"
      55                 :            : 
      56                 :            : #include <setjmp.h>
      57                 :            : #include <signal.h>
      58                 :            : 
      59                 :            : #include <exception>
      60                 :            : #ifdef USE_RTTI
      61                 :            : # include <typeinfo>
      62                 :            : # ifdef HAVE_CXXABI_H
      63                 :            : #  include <cxxabi.h>
      64                 :            : # endif
      65                 :            : #endif
      66                 :            : 
      67                 :            : #ifndef NO_LIBXAPIAN
      68                 :            : # include <xapian/error.h>
      69                 :            : #endif
      70                 :            : #include "errno_to_string.h"
      71                 :            : #include "filetests.h"
      72                 :            : #include "stringutils.h"
      73                 :            : 
      74                 :            : using namespace std;
      75                 :            : 
      76                 :            : /// The global verbose flag.
      77                 :            : int verbose;
      78                 :            : 
      79                 :            : #ifdef HAVE_VALGRIND
      80                 :            : static int vg_log_fd = -1;
      81                 :            : #endif
      82                 :            : 
      83                 :            : #ifdef HAVE_SIGSETJMP
      84                 :            : # define SIGSETJMP(ENV, SAVESIGS) sigsetjmp(ENV, SAVESIGS)
      85                 :            : # define SIGLONGJMP(ENV, VAL) siglongjmp(ENV, VAL)
      86                 :            : # define SIGJMP_BUF sigjmp_buf
      87                 :            : #else
      88                 :            : # define SIGSETJMP(ENV, SAVESIGS) setjmp(ENV)
      89                 :            : # define SIGLONGJMP(ENV, VAL) longjmp(ENV, VAL)
      90                 :            : # define SIGJMP_BUF jmp_buf
      91                 :            : #endif
      92                 :            : 
      93                 :            : /// The exception type we were expecting in TEST_EXCEPTION
      94                 :            : //  We use this to attempt to diagnose when the code fails to catch an
      95                 :            : //  exception when it should (due to a compiler or runtime fault in
      96                 :            : //  GCC 2.95 it seems)
      97                 :            : const char * expected_exception = NULL;
      98                 :            : 
      99                 :            : const char* expected_failure;
     100                 :            : 
     101                 :            : /// The debug printing stream
     102                 :          4 : std::ostringstream tout;
     103                 :            : 
     104                 :            : int test_driver::runs = 0;
     105                 :            : test_driver::result test_driver::subtotal;
     106                 :            : test_driver::result test_driver::total;
     107                 :          4 : string test_driver::argv0;
     108                 :          4 : string test_driver::opt_help;
     109                 :          4 : map<int, string *> test_driver::short_opts;
     110                 :          4 : vector<string> test_driver::test_names;
     111                 :            : bool test_driver::abort_on_error = false;
     112                 :          4 : string test_driver::col_red, test_driver::col_green;
     113                 :          4 : string test_driver::col_yellow, test_driver::col_reset;
     114                 :            : bool test_driver::use_cr = false;
     115                 :            : 
     116                 :            : void
     117                 :         34 : test_driver::write_and_clear_tout()
     118                 :            : {
     119                 :         34 :     const string & s = tout.str();
     120         [ +  + ]:         34 :     if (!s.empty()) {
     121 [ +  - ][ +  - ]:         29 :         out << '\n' << s;
     122 [ +  - ][ +  - ]:         29 :         tout.str(string());
     123                 :         34 :     }
     124                 :         34 : }
     125                 :            : 
     126                 :            : string
     127                 :         16 : test_driver::get_srcdir()
     128                 :            : {
     129                 :         16 :     char *p = getenv("srcdir");
     130 [ +  - ][ +  - ]:         16 :     if (p != NULL) return string(p);
     131                 :            : 
     132                 :            :     // Default srcdir to the pathname of argv[0].
     133         [ #  # ]:          0 :     string srcdir(argv0);
     134                 :          0 :     string::size_type i = srcdir.find_last_of(DIR_SEPS);
     135         [ #  # ]:          0 :     string srcfile;
     136         [ #  # ]:          0 :     if (i != string::npos) {
     137         [ #  # ]:          0 :         srcfile.assign(srcdir, i + 1, string::npos);
     138         [ #  # ]:          0 :         srcdir.erase(i);
     139                 :            :         // libtool may put the real executable in .libs.
     140                 :          0 :         i = srcdir.find_last_of(DIR_SEPS);
     141 [ #  # ][ #  # ]:          0 :         if (srcdir.substr(i + 1) == ".libs") {
                 [ #  # ]
     142         [ #  # ]:          0 :             srcdir.erase(i);
     143                 :            :             // And it may have an "lt-" prefix.
     144 [ #  # ][ #  # ]:          0 :             if (startswith(srcfile, "lt-")) srcfile.erase(0, 3);
     145                 :            :         }
     146                 :            :     } else {
     147                 :            :         // No path of argv[0], so default srcdir to the current directory.
     148                 :            :         // This may not work if libtool is involved as the true executable is
     149                 :            :         // sometimes in ".libs".
     150         [ #  # ]:          0 :         srcfile = srcdir;
     151         [ #  # ]:          0 :         srcdir = ".";
     152                 :            :     }
     153                 :            : 
     154                 :            :     // Remove any trailing ".exe" suffix, since some platforms add this.
     155 [ #  # ][ #  # ]:          0 :     if (endswith(srcfile, ".exe")) srcfile.resize(srcfile.size() - 4);
     156                 :            : 
     157                 :            :     // Sanity check.
     158 [ #  # ][ #  # ]:          0 :     if (!file_exists(srcdir + '/' + srcfile + ".cc")) {
         [ #  # ][ #  # ]
     159         [ #  # ]:          0 :         cout << argv0
     160                 :            :              << ": srcdir is not in the environment and I can't guess it!\n"
     161         [ #  # ]:          0 :                 "Run test programs using the runtest script - see HACKING for details"
     162         [ #  # ]:          0 :              << endl;
     163                 :          0 :         exit(1);
     164                 :            :     }
     165                 :         16 :     return srcdir;
     166                 :            : }
     167                 :            : 
     168                 :        179 : test_driver::test_driver(const test_desc *tests_)
     169                 :        179 :         : out(cout.rdbuf()), tests(tests_)
     170                 :            : {
     171         [ +  - ]:        179 :     tout << boolalpha;
     172                 :        179 : }
     173                 :            : 
     174                 :            : static SIGJMP_BUF jb;
     175                 :            : static int signum = 0;
     176                 :            : static void * sigaddr = NULL;
     177                 :            : 
     178                 :            : // Needs C linkage so we can pass it to sigaction()/signal() without problems.
     179                 :            : extern "C" {
     180                 :            : 
     181                 :            : #if defined HAVE_SIGACTION && defined SA_SIGINFO
     182                 :            : [[noreturn]]
     183                 :          0 : static void handle_sig(int signum_, siginfo_t *si, void *)
     184                 :            : {
     185                 :            :     // Disable all our signal handlers to avoid problems if the signal
     186                 :            :     // handling code causes a signal.
     187                 :            :     struct sigaction sa;
     188                 :          0 :     sa.sa_handler = SIG_DFL;
     189                 :          0 :     sigemptyset(&sa.sa_mask);
     190                 :          0 :     sa.sa_flags = 0;
     191                 :            :     // We set the handlers with SA_RESETHAND, but that will only reset the
     192                 :            :     // handler for the signal which fired.
     193         [ #  # ]:          0 :     if (signum_ != SIGSEGV) sigaction(SIGSEGV, &sa, NULL);
     194         [ #  # ]:          0 :     if (signum_ != SIGFPE) sigaction(SIGFPE, &sa, NULL);
     195         [ #  # ]:          0 :     if (signum_ != SIGILL) sigaction(SIGILL, &sa, NULL);
     196                 :            : # ifdef SIGBUS
     197         [ #  # ]:          0 :     if (signum_ != SIGBUS) sigaction(SIGBUS, &sa, NULL);
     198                 :            : # endif
     199                 :            : # ifdef SIGSTKFLT
     200         [ #  # ]:          0 :     if (signum_ != SIGSTKFLT) sigaction(SIGSTKFLT, &sa, NULL);
     201                 :            : # endif
     202                 :          0 :     signum = signum_;
     203                 :          0 :     sigaddr = si->si_addr;
     204                 :          0 :     SIGLONGJMP(jb, 1);
     205                 :            : }
     206                 :            : 
     207                 :            : #else
     208                 :            : 
     209                 :            : [[noreturn]]
     210                 :            : static void handle_sig(int signum_)
     211                 :            : {
     212                 :            :     // Disable all our signal handlers to avoid problems if the signal
     213                 :            :     // handling code causes a signal.
     214                 :            :     signal(SIGSEGV, SIG_DFL);
     215                 :            :     signal(SIGFPE, SIG_DFL);
     216                 :            :     signal(SIGILL, SIG_DFL);
     217                 :            : #ifdef SIGBUS
     218                 :            :     signal(SIGBUS, SIG_DFL);
     219                 :            : #endif
     220                 :            : #ifdef SIGSTKFLT
     221                 :            :     signal(SIGSTKFLT, SIG_DFL);
     222                 :            : #endif
     223                 :            :     signum = signum_;
     224                 :            :     SIGLONGJMP(jb, 1);
     225                 :            : }
     226                 :            : #endif
     227                 :            : 
     228                 :            : }
     229                 :            : 
     230                 :            : class SignalRedirector {
     231                 :            :   private:
     232                 :            :     bool active;
     233                 :            :   public:
     234                 :       2512 :     SignalRedirector() : active(false) { }
     235                 :       2512 :     void activate() {
     236                 :       2512 :         active = true;
     237                 :       2512 :         signum = 0;
     238                 :       2512 :         sigaddr = NULL;
     239                 :            :         // SA_SIGINFO not universal (e.g. not present on Linux < 2.2 and Hurd).
     240                 :            : #if defined HAVE_SIGACTION && defined SA_SIGINFO
     241                 :            :         struct sigaction sa;
     242                 :       2512 :         sa.sa_sigaction = handle_sig;
     243                 :       2512 :         sigemptyset(&sa.sa_mask);
     244                 :       2512 :         sa.sa_flags = SA_RESETHAND|SA_SIGINFO;
     245                 :       2512 :         sigaction(SIGSEGV, &sa, NULL);
     246                 :       2512 :         sigaction(SIGFPE, &sa, NULL);
     247                 :       2512 :         sigaction(SIGILL, &sa, NULL);
     248                 :            : # ifdef SIGBUS
     249                 :       2512 :         sigaction(SIGBUS, &sa, NULL);
     250                 :            : # endif
     251                 :            : # ifdef SIGSTKFLT
     252                 :       2512 :         sigaction(SIGSTKFLT, &sa, NULL);
     253                 :            : # endif
     254                 :            : #else
     255                 :            :         signal(SIGSEGV, handle_sig);
     256                 :            :         signal(SIGFPE, handle_sig);
     257                 :            :         signal(SIGILL, handle_sig);
     258                 :            : # ifdef SIGBUS
     259                 :            :         signal(SIGBUS, handle_sig);
     260                 :            : # endif
     261                 :            : # ifdef SIGSTKFLT
     262                 :            :         signal(SIGSTKFLT, handle_sig);
     263                 :            : # endif
     264                 :            : #endif
     265                 :       2512 :     }
     266                 :       2512 :     ~SignalRedirector() {
     267         [ +  - ]:       2512 :         if (active) {
     268                 :            : #if defined HAVE_SIGACTION && defined SA_SIGINFO
     269                 :            :             struct sigaction sa;
     270                 :       2512 :             sa.sa_handler = SIG_DFL;
     271                 :       2512 :             sigemptyset(&sa.sa_mask);
     272                 :       2512 :             sa.sa_flags = 0;
     273                 :       2512 :             sigaction(SIGSEGV, &sa, NULL);
     274                 :       2512 :             sigaction(SIGFPE, &sa, NULL);
     275                 :       2512 :             sigaction(SIGILL, &sa, NULL);
     276                 :            : # ifdef SIGBUS
     277                 :       2512 :             sigaction(SIGBUS, &sa, NULL);
     278                 :            : # endif
     279                 :            : # ifdef SIGSTKFLT
     280                 :       2512 :             sigaction(SIGSTKFLT, &sa, NULL);
     281                 :            : # endif
     282                 :            : #else
     283                 :            :             signal(SIGSEGV, SIG_DFL);
     284                 :            :             signal(SIGFPE, SIG_DFL);
     285                 :            :             signal(SIGILL, SIG_DFL);
     286                 :            : # ifdef SIGBUS
     287                 :            :             signal(SIGBUS, SIG_DFL);
     288                 :            : # endif
     289                 :            : # ifdef SIGSTKFLT
     290                 :            :             signal(SIGSTKFLT, SIG_DFL);
     291                 :            : # endif
     292                 :            : #endif
     293                 :            :         }
     294                 :       2512 :     }
     295                 :            : };
     296                 :            : 
     297                 :            : //  A wrapper around the tests to trap exceptions,
     298                 :            : //  and avoid having to catch them in every test function.
     299                 :            : //  If this test driver is used for anything other than
     300                 :            : //  Xapian tests, then this ought to be provided by
     301                 :            : //  the client, really.
     302                 :            : //  return: test_driver::PASS, test_driver::FAIL, test_driver::SKIP,
     303                 :            : //  test_driver::XFAIL or test_driver:XPASS.
     304                 :            : test_driver::test_result
     305                 :       2512 : test_driver::runtest(const test_desc *test)
     306                 :            : {
     307                 :            :     // This is used to make a note of how many times we've run the test
     308                 :       2512 :     volatile int runcount = 0;
     309                 :            : 
     310         [ +  - ]:       2512 :     FDTracker fdtracker;
     311         [ +  - ]:       2512 :     fdtracker.init();
     312                 :            : 
     313                 :            :     while (true) {
     314 [ +  - ][ +  - ]:       2512 :         tout.str(string());
     315         [ +  - ]:       2512 :         if (SIGSETJMP(jb, 1) == 0) {
     316                 :       2512 :             SignalRedirector sig; // use object so signal handlers are reset
     317                 :            :             static bool catch_signals =
     318 [ +  + ][ +  - ]:       2512 :                 (getenv("XAPIAN_TESTSUITE_SIG_DFL") == NULL);
     319         [ +  - ]:       2512 :             if (catch_signals) sig.activate();
     320                 :            :             try {
     321                 :       2512 :                 expected_exception = NULL;
     322                 :       2512 :                 expected_failure = NULL;
     323                 :            : #ifdef HAVE_VALGRIND
     324                 :            :                 int vg_errs = 0;
     325                 :            :                 long vg_leaks = 0, vg_dubious = 0, vg_reachable = 0;
     326                 :            :                 if (vg_log_fd != -1) {
     327                 :            :                     VALGRIND_DO_LEAK_CHECK;
     328                 :            :                     vg_errs = VALGRIND_COUNT_ERRORS;
     329                 :            :                     long dummy;
     330                 :            :                     VALGRIND_COUNT_LEAKS(vg_leaks, vg_dubious, vg_reachable, dummy);
     331                 :            :                     (void)dummy;
     332                 :            :                     // Skip past any unread log output.
     333                 :            :                     lseek(vg_log_fd, 0, SEEK_END);
     334                 :            :                 }
     335                 :            : #endif
     336 [ +  + ][ -  + ]:       2512 :                 if (!test->run()) {
     337         [ #  # ]:          0 :                     out << ' ';
     338         [ #  # ]:          0 :                     if (expected_failure) {
     339 [ #  # ][ #  # ]:          0 :                         out << col_yellow << "XFAIL (" << expected_failure << ")";
         [ #  # ][ #  # ]
     340                 :            :                     } else {
     341 [ #  # ][ #  # ]:          0 :                         out << col_red << "FAILED";
     342                 :            :                     }
     343         [ #  # ]:          0 :                     out << col_reset;
     344         [ #  # ]:          0 :                     write_and_clear_tout();
     345         [ #  # ]:          0 :                     return expected_failure ? XFAIL : FAIL;
     346                 :            :                 }
     347         [ -  + ]:       2478 :                 if (verbose > 1)
     348         [ #  # ]:          0 :                     write_and_clear_tout();
     349                 :            : #ifndef NO_LIBXAPIAN
     350         [ +  + ]:       2459 :                 if (backendmanager)
     351         [ +  - ]:       2369 :                     backendmanager->clean_up();
     352                 :            : #endif
     353                 :            : #ifdef HAVE_VALGRIND
     354                 :            :                 if (vg_log_fd != -1) {
     355                 :            :                     // We must empty tout before asking valgrind to perform its
     356                 :            :                     // leak checks, otherwise the buffers holding the output
     357                 :            :                     // may be identified as a memory leak (especially if >1K of
     358                 :            :                     // output has been buffered it appears...)
     359                 :            :                     tout.str(string());
     360                 :            : #define REPORT_FAIL_VG(M) do { \
     361                 :            :     if (verbose) { \
     362                 :            :         while (true) { \
     363                 :            :             ssize_t c = read(vg_log_fd, buf, sizeof(buf)); \
     364                 :            :             if (c == 0 || (c < 0 && errno != EINTR)) break; \
     365                 :            :             if (c > 0) out << string(buf, c); \
     366                 :            :         } \
     367                 :            :     } \
     368                 :            :     out << " " << col_red << M << col_reset; \
     369                 :            : } while (0)
     370                 :            :                     // Record the current position so we can restore it so
     371                 :            :                     // REPORT_FAIL_VG() gets the whole output.
     372                 :            :                     off_t curpos = lseek(vg_log_fd, 0, SEEK_CUR);
     373                 :            :                     char buf[4096];
     374                 :            :                     while (true) {
     375                 :            :                         ssize_t c = read(vg_log_fd, buf, sizeof(buf));
     376                 :            :                         if (c == 0 || (c < 0 && errno != EINTR)) {
     377                 :            :                             buf[0] = 0;
     378                 :            :                             break;
     379                 :            :                         }
     380                 :            :                         if (c > 0) {
     381                 :            :                             // Valgrind output has "==<pid>== \n" between
     382                 :            :                             // report "records", so skip any lines like that,
     383                 :            :                             // and also any warnings and continuation lines.
     384                 :            :                             ssize_t i = 0;
     385                 :            :                             while (true) {
     386                 :            :                                 const char * spc;
     387                 :            :                                 spc = static_cast<const char *>(
     388                 :            :                                         memchr(buf + i, ' ', c - i));
     389                 :            :                                 if (!spc) {
     390                 :            :                                     i = c;
     391                 :            :                                     break;
     392                 :            :                                 }
     393                 :            :                                 i = spc - buf;
     394                 :            :                                 if (++i >= c) break;
     395                 :            :                                 if (buf[i] == '\n')
     396                 :            :                                     continue;
     397                 :            :                                 if (c - i >= 8 &&
     398                 :            :                                     (memcmp(buf + i, "Warning:", 8) == 0 ||
     399                 :            :                                      memcmp(buf + i, "   ", 3) == 0)) {
     400                 :            :                                     // Skip this line.
     401                 :            :                                     i += 3;
     402                 :            :                                     const char * nl;
     403                 :            :                                     nl = static_cast<const char *>(
     404                 :            :                                             memchr(buf + i, '\n', c - i));
     405                 :            :                                     if (!nl) {
     406                 :            :                                         i = c;
     407                 :            :                                         break;
     408                 :            :                                     }
     409                 :            :                                     i = nl - buf;
     410                 :            :                                     continue;
     411                 :            :                                 }
     412                 :            :                                 break;
     413                 :            :                             }
     414                 :            : 
     415                 :            :                             char *start = buf + i;
     416                 :            :                             c -= i;
     417                 :            :                             if (c > 128) c = 128;
     418                 :            : 
     419                 :            :                             {
     420                 :            :                                 const char *p;
     421                 :            :                                 p = static_cast<const char*>(
     422                 :            :                                         memchr(start, '\n', c));
     423                 :            :                                 if (p != NULL) c = p - start;
     424                 :            :                             }
     425                 :            : 
     426                 :            :                             memmove(buf, start, c);
     427                 :            :                             buf[c] = '\0';
     428                 :            :                             break;
     429                 :            :                         }
     430                 :            :                     }
     431                 :            :                     lseek(vg_log_fd, curpos, SEEK_SET);
     432                 :            : 
     433                 :            :                     int vg_errs2 = VALGRIND_COUNT_ERRORS;
     434                 :            :                     vg_errs = vg_errs2 - vg_errs;
     435                 :            :                     VALGRIND_DO_LEAK_CHECK;
     436                 :            :                     long vg_leaks2 = 0, vg_dubious2 = 0, vg_reachable2 = 0;
     437                 :            :                     long dummy;
     438                 :            :                     VALGRIND_COUNT_LEAKS(vg_leaks2, vg_dubious2, vg_reachable2,
     439                 :            :                                          dummy);
     440                 :            :                     (void)dummy;
     441                 :            :                     vg_leaks = vg_leaks2 - vg_leaks;
     442                 :            :                     vg_dubious = vg_dubious2 - vg_dubious;
     443                 :            :                     vg_reachable = vg_reachable2 - vg_reachable;
     444                 :            :                     if (vg_errs) {
     445                 :            :                         string fail_msg(buf);
     446                 :            :                         if (fail_msg.empty())
     447                 :            :                             fail_msg = "VALGRIND DETECTED A PROBLEM";
     448                 :            :                         REPORT_FAIL_VG(fail_msg);
     449                 :            :                         return FAIL;
     450                 :            :                     }
     451                 :            :                     if (vg_leaks > 0) {
     452                 :            :                         REPORT_FAIL_VG("LEAKED " << vg_leaks << " BYTES");
     453                 :            :                         return FAIL;
     454                 :            :                     }
     455                 :            :                     if (vg_dubious > 0) {
     456                 :            :                         // If code deliberately holds onto blocks by a pointer
     457                 :            :                         // not to the start (e.g. languages/utilities.c does)
     458                 :            :                         // then we need to rerun the test to see if the leak is
     459                 :            :                         // real...
     460                 :            :                         if (runcount == 0) {
     461                 :            :                             out << col_yellow << " PROBABLY LEAKED MEMORY - RETRYING TEST" << col_reset;
     462                 :            :                             ++runcount;
     463                 :            :                             // Ensure that any cached memory from fd tracking
     464                 :            :                             // is allocated before we rerun the test.
     465                 :            :                             (void)fdtracker.check();
     466                 :            :                             continue;
     467                 :            :                         }
     468                 :            :                         REPORT_FAIL_VG("PROBABLY LEAKED " << vg_dubious << " BYTES");
     469                 :            :                         return FAIL;
     470                 :            :                     }
     471                 :            :                     if (vg_reachable > 0) {
     472                 :            :                         // C++ STL implementations often "horde" released
     473                 :            :                         // memory - for GCC 3.4 and newer the runtest script
     474                 :            :                         // sets GLIBCXX_FORCE_NEW=1 which will disable this
     475                 :            :                         // behaviour so we avoid this issue, but for older
     476                 :            :                         // GCC and other compilers this may be an issue.
     477                 :            :                         //
     478                 :            :                         // See also:
     479                 :            :                         // http://valgrind.org/docs/FAQ/#faq.reports
     480                 :            :                         //
     481                 :            :                         // For now, just use runcount to rerun the test and see
     482                 :            :                         // if more is leaked - hopefully this shouldn't give
     483                 :            :                         // false positives.
     484                 :            :                         if (runcount == 0) {
     485                 :            :                             out << col_yellow << " POSSIBLE UNRELEASED MEMORY - RETRYING TEST" << col_reset;
     486                 :            :                             ++runcount;
     487                 :            :                             // Ensure that any cached memory from fd tracking
     488                 :            :                             // is allocated before we rerun the test.
     489                 :            :                             (void)fdtracker.check();
     490                 :            :                             continue;
     491                 :            :                         }
     492                 :            :                         REPORT_FAIL_VG("FAILED TO RELEASE " << vg_reachable << " BYTES");
     493                 :            :                         return FAIL;
     494                 :            :                     }
     495                 :            :                 }
     496                 :            : #endif
     497 [ +  - ][ -  + ]:       2478 :                 if (!fdtracker.check()) {
     498         [ #  # ]:          0 :                     if (runcount == 0) {
     499 [ #  # ][ #  # ]:          0 :                         out << col_yellow << " POSSIBLE FDLEAK:" << fdtracker.get_message() << col_reset;
         [ #  # ][ #  # ]
     500                 :          0 :                         ++runcount;
     501                 :          0 :                         continue;
     502                 :            :                     }
     503 [ #  # ][ #  # ]:          0 :                     out << col_red << " FDLEAK:" << fdtracker.get_message() << col_reset;
         [ #  # ][ #  # ]
     504                 :          0 :                     return FAIL;
     505                 :            :                 }
     506                 :          2 :             } catch (const TestFail &) {
     507         [ -  + ]:          1 :                 out << ' ';
     508 [ #  # ][ +  - ]:          1 :                 if (expected_failure) {
     509   [ #  #  #  #  :          1 :                     out << col_yellow << "XFAIL (" << expected_failure << ")";
             #  #  #  # ]
         [ -  + ][ -  + ]
         [ -  + ][ -  + ]
     510                 :            :                 } else {
     511   [ #  #  #  # ]:          0 :                     out << col_red << "FAILED";
     512                 :            :                 }
     513 [ #  # ][ -  + ]:          1 :                 out << col_reset;
     514 [ #  # ][ -  + ]:          1 :                 write_and_clear_tout();
     515 [ #  # ][ +  - ]:          1 :                 return expected_failure ? XFAIL : FAIL;
     516                 :         56 :             } catch (const TestSkip &) {
     517   [ -  +  #  #  :         28 :                 out << col_yellow << " SKIPPED" << col_reset;
           #  # ][ -  + ]
                 [ -  + ]
     518 [ #  # ][ -  + ]:         28 :                 write_and_clear_tout();
     519                 :         28 :                 return SKIP;
     520                 :            : #ifndef NO_LIBXAPIAN
     521                 :         10 :             } catch (const Xapian::Error &err) {
     522         [ -  + ]:          5 :                 out << ' ';
     523         [ -  + ]:          5 :                 string errclass = err.get_type();
     524   [ -  +  #  #  :          5 :                 if (expected_exception && expected_exception == errclass) {
           #  # ][ -  + ]
     525   [ #  #  #  #  :          0 :                     out << col_yellow << "C++ FAILED TO CATCH " << errclass << col_reset;
             #  #  #  # ]
     526                 :          0 :                     return SKIP;
     527                 :            :                 }
     528   [ -  +  #  # ]:         10 :                 if (errclass == "NetworkError" &&
                 [ -  + ]
     529   [ -  +  #  #  :          5 :                     err.get_error_string() != NULL &&
                   #  # ]
     530   [ #  #  #  #  :          5 :                     err.get_error_string() == errno_to_string(ECHILD)) {
             #  #  #  # ]
                 [ +  - ]
     531                 :            :                     // ECHILD suggests we've run out of processes, and that's
     532                 :            :                     // much more likely to be a system issue than a Xapian bug.
     533                 :            :                     //
     534                 :            :                     // We also see apparently spurious ECHILD on Debian
     535                 :            :                     // buildds sometimes: https://bugs.debian.org/681941
     536   [ #  #  #  #  :          0 :                     out << col_yellow << "ECHILD in network code" << col_reset;
                   #  # ]
     537                 :          0 :                     return SKIP;
     538                 :            :                 }
     539                 :            : 
     540         [ +  - ]:          5 :                 if (expected_failure) {
     541 [ -  + ][ -  + ]:          5 :                     out << col_yellow << "XFAIL (" << expected_failure
                 [ -  + ]
     542         [ -  + ]:          5 :                         << "): ";
     543                 :            :                 } else {
     544   [ #  #  #  # ]:          0 :                     out << col_red << "FAIL: ";
     545                 :            :                 }
     546 [ -  + ][ -  + ]:          5 :                 out << err.get_description() << col_reset;
                 [ -  + ]
     547         [ -  + ]:          5 :                 write_and_clear_tout();
     548         [ +  - ]:          5 :                 return expected_failure ? XFAIL : FAIL;
     549                 :            : #endif
     550                 :          0 :             } catch (const string & msg) {
     551         [ #  # ]:          0 :                 out << ' ';
     552         [ #  # ]:          0 :                 if (expected_failure) {
     553   [ #  #  #  #  :          0 :                     out << col_yellow << "XFAIL (" << expected_failure
                   #  # ]
     554         [ #  # ]:          0 :                         << "): ";
     555                 :            :                 } else {
     556   [ #  #  #  # ]:          0 :                     out << col_red << "FAIL: ";
     557                 :            :                 }
     558   [ #  #  #  #  :          0 :                 out << "EXCEPTION std::string " << msg << col_reset;
                   #  # ]
     559         [ #  # ]:          0 :                 write_and_clear_tout();
     560         [ #  # ]:          0 :                 return expected_failure ? XFAIL : FAIL;
     561                 :          0 :             } catch (const std::exception & e) {
     562         [ #  # ]:          0 :                 out << ' ';
     563         [ #  # ]:          0 :                 if (expected_failure) {
     564   [ #  #  #  #  :          0 :                     out << col_yellow << "XFAIL (" << expected_failure
                   #  # ]
     565         [ #  # ]:          0 :                         << "): ";
     566                 :            :                 } else {
     567   [ #  #  #  # ]:          0 :                     out << col_red << "FAIL: ";
     568                 :            :                 }
     569                 :            : #ifndef USE_RTTI
     570                 :            :                 out << "std::exception";
     571                 :            : #else
     572                 :          0 :                 const char * name = typeid(e).name();
     573                 :            : # ifdef HAVE_CXXABI_H
     574                 :            :                 // __cxa_demangle() apparently requires GCC >= 3.1.
     575                 :            :                 // Demangle the name which GCC returns for type_info::name().
     576                 :            :                 int status;
     577         [ #  # ]:          0 :                 char * realname = abi::__cxa_demangle(name, NULL, 0, &status);
     578         [ #  # ]:          0 :                 if (realname) {
     579         [ #  # ]:          0 :                     out << realname;
     580                 :          0 :                     free(realname);
     581                 :            :                 } else {
     582         [ #  # ]:          0 :                     out << name;
     583                 :            :                 }
     584                 :            : # else
     585                 :            :                 out << name;
     586                 :            : # endif
     587                 :            : #endif
     588   [ #  #  #  #  :          0 :                 out << ": " << e.what() << col_reset;
                   #  # ]
     589         [ #  # ]:          0 :                 write_and_clear_tout();
     590         [ #  # ]:          0 :                 return expected_failure ? XFAIL : FAIL;
     591                 :          0 :             } catch (const char * msg) {
     592         [ #  # ]:          0 :                 out << ' ';
     593         [ #  # ]:          0 :                 if (expected_failure) {
     594   [ #  #  #  #  :          0 :                     out << col_yellow << "XFAIL (" << expected_failure
                   #  # ]
     595         [ #  # ]:          0 :                         << "): ";
     596                 :            :                 } else {
     597   [ #  #  #  # ]:          0 :                     out << col_red << "FAIL: ";
     598                 :            :                 }
     599         [ #  # ]:          0 :                 if (msg) {
     600   [ #  #  #  # ]:          0 :                     out << "EXCEPTION char* " << msg;
     601                 :            :                 } else {
     602         [ #  # ]:          0 :                     out << "EXCEPTION (char*)NULL";
     603                 :            :                 }
     604         [ #  # ]:          0 :                 out << col_reset;
     605         [ #  # ]:          0 :                 write_and_clear_tout();
     606         [ #  # ]:          0 :                 return expected_failure ? XFAIL : FAIL;
     607   [ #  #  #  #  :         34 :             } catch (...) {
             #  #  #  # ]
           [ +  +  +  -  
             -  -  -  #  
                      # ]
     608         [ #  # ]:          0 :                 out << ' ';
     609         [ #  # ]:          0 :                 if (expected_failure) {
     610   [ #  #  #  #  :          0 :                     out << col_yellow << "XFAIL (" << expected_failure
                   #  # ]
     611         [ #  # ]:          0 :                         << "): ";
     612                 :            :                 } else {
     613   [ #  #  #  # ]:          0 :                     out << col_red << "FAIL: ";
     614                 :            :                 }
     615   [ #  #  #  # ]:          0 :                 out << "UNKNOWN EXCEPTION" << col_reset;
     616         [ #  # ]:          0 :                 write_and_clear_tout();
     617         [ #  # ]:          0 :                 return expected_failure ? XFAIL : FAIL;
     618                 :            :             }
     619                 :            : 
     620         [ -  + ]:       2478 :             if (expected_failure) {
     621                 :            :                 // Testcase marked as expected to fail but actually passed.
     622 [ #  # ][ #  # ]:          0 :                 out << ' ' << col_red << "XPASS (" << expected_failure << ")"
         [ #  # ][ #  # ]
                 [ #  # ]
     623         [ #  # ]:          0 :                     << col_reset;
     624         [ #  # ]:          0 :                 write_and_clear_tout();
     625                 :          0 :                 return XPASS;
     626                 :            :             }
     627         [ +  - ]:       2512 :             return PASS;
     628                 :            :         }
     629                 :            : 
     630                 :            :         // Caught a signal.
     631                 :          0 :         const char *signame = "SIGNAL";
     632                 :          0 :         bool show_addr = true;
     633   [ #  #  #  #  :          0 :         switch (signum) {
                   #  # ]
     634                 :          0 :             case SIGSEGV: signame = "SIGSEGV"; break;
     635                 :          0 :             case SIGFPE: signame = "SIGFPE"; break;
     636                 :          0 :             case SIGILL: signame = "SIGILL"; break;
     637                 :            : #ifdef SIGBUS
     638                 :          0 :             case SIGBUS: signame = "SIGBUS"; break;
     639                 :            : #endif
     640                 :            : #ifdef SIGSTKFLT
     641                 :            :             case SIGSTKFLT:
     642                 :          0 :                 signame = "SIGSTKFLT";
     643                 :          0 :                 show_addr = false;
     644                 :          0 :                 break;
     645                 :            : #endif
     646                 :            :         }
     647 [ #  # ][ #  # ]:          0 :         out << " " << col_red << signame;
                 [ #  # ]
     648         [ #  # ]:          0 :         if (show_addr) {
     649                 :            :             char buf[40];
     650                 :          0 :             sprintf(buf, " at %p", sigaddr);
     651         [ #  # ]:          0 :             out << buf;
     652                 :            :         }
     653         [ #  # ]:          0 :         out << col_reset;
     654         [ #  # ]:          0 :         write_and_clear_tout();
     655                 :          0 :         return FAIL;
     656                 :       2512 :     }
     657                 :            : }
     658                 :            : 
     659                 :            : test_driver::result
     660                 :        179 : test_driver::run_tests(vector<string>::const_iterator b,
     661                 :            :                        vector<string>::const_iterator e)
     662                 :            : {
     663                 :        179 :     return do_run_tests(b, e);
     664                 :            : }
     665                 :            : 
     666                 :            : test_driver::result
     667                 :          0 : test_driver::run_tests()
     668                 :            : {
     669                 :          0 :     const vector<string> blank;
     670         [ #  # ]:          0 :     return do_run_tests(blank.begin(), blank.end());
     671                 :            : }
     672                 :            : 
     673                 :            : test_driver::result
     674                 :        179 : test_driver::do_run_tests(vector<string>::const_iterator b,
     675                 :            :                           vector<string>::const_iterator e)
     676                 :            : {
     677         [ +  - ]:        179 :     set<string> m(b, e);
     678                 :        179 :     bool check_name = !m.empty();
     679                 :            : 
     680                 :        179 :     test_driver::result res;
     681                 :            : 
     682         [ +  + ]:       2691 :     for (const test_desc *test = tests; test->name; ++test) {
     683                 :       2512 :         bool do_this_test = !check_name;
     684 [ -  + ][ #  # ]:       2512 :         if (!do_this_test && m.find(test->name) != m.end())
         [ #  # ][ #  # ]
         [ -  + ][ -  + ]
         [ -  + ][ -  + ]
           [ -  +  #  #  
          #  #  #  #  #  
                      # ]
     685                 :          0 :             do_this_test = true;
     686         [ -  + ]:       2512 :         if (!do_this_test) {
     687                 :            :             // if this test is "foo123" see if "foo" was listed
     688                 :            :             // this way "./testprog foo" can run foo1, foo2, etc.
     689         [ #  # ]:          0 :             string t = test->name;
     690                 :            :             string::size_type i;
     691         [ #  # ]:          0 :             i = t.find_last_not_of("0123456789") + 1;
     692         [ #  # ]:          0 :             if (i != string::npos) {
     693         [ #  # ]:          0 :                 t.resize(i);
     694 [ #  # ][ #  # ]:          0 :                 if (m.find(t) != m.end()) do_this_test = true;
     695                 :          0 :             }
     696                 :            :         }
     697         [ +  - ]:       2512 :         if (do_this_test) {
     698 [ +  - ][ +  - ]:       2512 :             out << "Running test: " << test->name << "...";
                 [ +  - ]
     699         [ +  - ]:       2512 :             out.flush();
     700         [ +  - ]:       2512 :             test_driver::test_result test_res = runtest(test);
     701                 :            : #ifndef NO_LIBXAPIAN
     702         [ +  + ]:       2493 :             if (backendmanager)
     703         [ +  - ]:       2399 :                 backendmanager->clean_up();
     704                 :            : #endif
     705   [ +  +  -  -  :       2512 :             switch (test_res) {
                   +  - ]
     706                 :            :                 case PASS:
     707                 :       2478 :                     ++res.succeeded;
     708 [ -  + ][ #  # ]:       2478 :                     if (verbose || !use_cr) {
     709 [ +  - ][ +  - ]:       2478 :                         out << col_green << " ok" << col_reset << endl;
         [ +  - ][ +  - ]
     710                 :            :                     } else {
     711         [ #  # ]:          0 :                         out << "\r                                                                               \r";
     712                 :            :                     }
     713                 :       2478 :                     break;
     714                 :            :                 case XFAIL:
     715                 :          6 :                     ++res.xfailed;
     716         [ +  - ]:          6 :                     out << endl;
     717                 :          6 :                     break;
     718                 :            :                 case FAIL:
     719                 :          0 :                     ++res.failed;
     720         [ #  # ]:          0 :                     out << endl;
     721         [ #  # ]:          0 :                     if (abort_on_error) {
     722                 :          0 :                         throw "Test failed - aborting further tests";
     723                 :            :                     }
     724                 :          0 :                     break;
     725                 :            :                 case XPASS:
     726                 :          0 :                     ++res.xpassed;
     727         [ #  # ]:          0 :                     out << endl;
     728         [ #  # ]:          0 :                     if (abort_on_error) {
     729                 :          0 :                         throw "Test marked as XFAIL passed - aborting further tests";
     730                 :            :                     }
     731                 :          0 :                     break;
     732                 :            :                 case SKIP:
     733                 :         28 :                     ++res.skipped;
     734         [ +  - ]:         28 :                     out << endl;
     735                 :            :                     // ignore the result of this test.
     736                 :       2512 :                     break;
     737                 :            :             }
     738                 :            :         }
     739                 :            :     }
     740                 :        179 :     return res;
     741                 :            : }
     742                 :            : 
     743                 :            : void
     744                 :          0 : test_driver::usage()
     745                 :            : {
     746                 :          0 :     cout << "Usage: " << argv0 << " [-v|--verbose] [-o|--abort-on-error] " << opt_help
     747                 :          0 :          << "[TESTNAME]..." << endl;
     748                 :          0 :     cout << "       " << argv0 << " [-h|--help]" << endl;
     749                 :          0 :     exit(1);
     750                 :            : }
     751                 :            : 
     752                 :            : /* Needs C linkage so we can pass it to atexit() without problems. */
     753                 :            : extern "C" {
     754                 :            : // Call upon program exit if there's more than one test run.
     755                 :            : static void
     756                 :          1 : report_totals(void)
     757                 :            : {
     758 [ +  - ][ +  - ]:          1 :     test_driver::report(test_driver::total, "total");
     759                 :          1 : }
     760                 :            : }
     761                 :            : 
     762                 :            : void
     763                 :          9 : test_driver::report(const test_driver::result &r, const string &desc)
     764                 :            : {
     765                 :            :     // Report totals at the end if we reported two or more subtotals.
     766         [ +  + ]:          9 :     if (++runs == 2) atexit(report_totals);
     767                 :            : 
     768 [ -  + ][ #  # ]:          9 :     if (r.succeeded != 0 || r.failed != 0) {
     769                 :          9 :         cout << argv0 << " " << desc << ": ";
     770                 :            : 
     771 [ +  - ][ +  - ]:          9 :         if (r.failed == 0 && r.xpassed == 0)
     772                 :          9 :             cout << "All ";
     773                 :            : 
     774                 :          9 :         cout << col_green << r.succeeded << col_reset << " tests passed";
     775                 :            : 
     776         [ -  + ]:          9 :         if (r.failed != 0)
     777                 :          0 :             cout << ", " << col_red << r.failed << col_reset << " failed";
     778                 :            : 
     779         [ -  + ]:          9 :         if (r.xpassed != 0)
     780                 :          0 :             cout << ", " << col_red << r.xpassed << col_reset
     781                 :          0 :                  << " expected failures passed";
     782                 :            : 
     783         [ +  + ]:          9 :         if (r.xfailed != 0)
     784                 :          2 :             cout << ", " << col_yellow << r.xfailed << col_reset
     785                 :          2 :                  << " expected failures";
     786                 :            : 
     787         [ +  + ]:          9 :         if (r.skipped) {
     788                 :          8 :             cout << ", " << col_yellow << r.skipped << col_reset
     789                 :          8 :                  << " skipped." << endl;
     790                 :            :         } else {
     791                 :          1 :             cout << "." << endl;
     792                 :            :         }
     793                 :            :     }
     794                 :          9 : }
     795                 :            : 
     796                 :            : void
     797                 :          3 : test_driver::add_command_line_option(const string &l, char s, string * arg)
     798                 :            : {
     799         [ +  - ]:          3 :     short_opts.insert(make_pair(int(s), arg));
     800                 :          3 :     opt_help += "[-";
     801                 :          3 :     opt_help += s;
     802                 :          3 :     opt_help += ' ';
     803                 :          3 :     opt_help += l;
     804                 :          3 :     opt_help += "] ";
     805                 :          3 : }
     806                 :            : 
     807                 :            : void
     808                 :          4 : test_driver::parse_command_line(int argc, char **argv)
     809                 :            : {
     810         [ +  - ]:          4 :     argv0 = argv[0];
     811                 :            : 
     812                 :            : #ifdef HAVE_VALGRIND
     813                 :            :     if (RUNNING_ON_VALGRIND) {
     814                 :            :         if (getenv("XAPIAN_TESTSUITE_VALGRIND") != NULL) {
     815                 :            :             // Open the valgrind log file, and unlink it.
     816                 :            :             char fname[64];
     817                 :            :             sprintf(fname, ".valgrind.log.%lu",
     818                 :            :                     static_cast<unsigned long>(getpid()));
     819                 :            :             vg_log_fd = open(fname, O_RDONLY|O_NONBLOCK|O_CLOEXEC);
     820                 :            :             if (vg_log_fd != -1) unlink(fname);
     821                 :            :         }
     822                 :            :     }
     823                 :            : #endif
     824                 :            : 
     825                 :            : #ifndef __WIN32__
     826                 :            :     {
     827                 :          4 :         bool colourise = true;
     828                 :          4 :         const char *p = getenv("XAPIAN_TESTSUITE_OUTPUT");
     829 [ -  + ][ #  # ]:          4 :         if (p == NULL || !*p || strcmp(p, "auto") == 0) {
                 [ #  # ]
     830                 :          4 :             colourise = isatty(1);
     831         [ #  # ]:          0 :         } else if (strcmp(p, "plain") == 0) {
     832                 :          0 :             colourise = false;
     833                 :            :         }
     834         [ -  + ]:          4 :         if (colourise) {
     835         [ #  # ]:          0 :             col_red = "\x1b[1m\x1b[31m";
     836         [ #  # ]:          0 :             col_green = "\x1b[1m\x1b[32m";
     837         [ #  # ]:          0 :             col_yellow = "\x1b[1m\x1b[33m";
     838         [ #  # ]:          0 :             col_reset = "\x1b[0m";
     839                 :          0 :             use_cr = true;
     840                 :            :         }
     841                 :            :     }
     842                 :            : #endif
     843                 :            : 
     844                 :            :     static const struct option long_opts[] = {
     845                 :            :         {"verbose",           no_argument, 0, 'v'},
     846                 :            :         {"abort-on-error",    no_argument, 0, 'o'},
     847                 :            :         {"help",              no_argument, 0, 'h'},
     848                 :            :         {NULL,                  0, 0, 0}
     849                 :            :     };
     850                 :            : 
     851         [ +  - ]:          4 :     string short_opts_string = "voh";
     852                 :          4 :     map<int, string *>::const_iterator i;
     853         [ +  + ]:          7 :     for (i = short_opts.begin(); i != short_opts.end(); ++i) {
     854         [ +  - ]:          3 :         short_opts_string += char(i->first);
     855         [ +  - ]:          3 :         short_opts_string += ':';
     856                 :            :     }
     857                 :          4 :     const char * opts = short_opts_string.c_str();
     858                 :            : 
     859                 :            :     int c;
     860         [ -  + ]:          4 :     while ((c = gnu_getopt_long(argc, argv, opts, long_opts, 0)) != -1) {
     861      [ #  #  # ]:          0 :         switch (c) {
     862                 :            :             case 'v':
     863                 :          0 :                 ++verbose;
     864                 :          0 :                 break;
     865                 :            :             case 'o':
     866                 :          0 :                 abort_on_error = true;
     867                 :          0 :                 break;
     868                 :            :             default: {
     869         [ #  # ]:          0 :                 i = short_opts.find(c);
     870         [ #  # ]:          0 :                 if (i != short_opts.end()) {
     871         [ #  # ]:          0 :                     i->second->assign(optarg);
     872                 :          0 :                     break;
     873                 :            :                 }
     874                 :            :                 // -h or unrecognised option
     875                 :          0 :                 usage();
     876                 :            :                 return; // usage() doesn't return ...
     877                 :            :             }
     878                 :            :         }
     879                 :            :     }
     880                 :            : 
     881         [ +  - ]:          4 :     if (verbose == 0) {
     882                 :          4 :         const char *p = getenv("VERBOSE");
     883         [ +  - ]:          4 :         if (p != NULL) {
     884                 :          4 :             verbose = atoi(p);
     885                 :            :         }
     886                 :            :     }
     887                 :            : 
     888         [ -  + ]:          4 :     while (argv[optind]) {
     889 [ #  # ][ #  # ]:          0 :         test_names.push_back(string(argv[optind]));
     890                 :          0 :         optind++;
     891                 :          4 :     }
     892                 :          4 : }
     893                 :            : 
     894                 :            : int
     895                 :        179 : test_driver::run(const test_desc *tests)
     896                 :            : {
     897         [ +  - ]:        179 :     test_driver driver(tests);
     898                 :            : 
     899                 :        179 :     test_driver::result myresult;
     900         [ +  - ]:        179 :     myresult = driver.run_tests(test_names.begin(), test_names.end());
     901                 :            : 
     902                 :        179 :     subtotal += myresult;
     903                 :            : 
     904                 :            :     // Return value is a Unix-style exit code, so 0 for success and 1 for
     905                 :            :     // failure.
     906 [ +  - ][ -  + ]:        179 :     return myresult.failed > 0 || myresult.xpassed > 0;
     907                 :            : }
     908                 :            : 
     909                 :            : bool
     910                 :    8175052 : TEST_EQUAL_DOUBLE_(double a, double b)
     911                 :            : {
     912         [ +  + ]:    8175052 :     if (a == b) return true;
     913                 :        868 :     return (ceil(log10(max(fabs(a), fabs(b)))) - log10(fabs(a - b)) > DBL_DIG);
     914 [ +  - ][ +  - ]:         16 : }

Generated by: LCOV version 1.11