git.notmuchmail.org Git - notmuch/blob - test/basic

   1 #!/usr/bin/env bash
   2 #
   3 # Copyright (c) 2005 Junio C Hamano
   4 #
   5
   6 test_description='the test framework itself.'
   7
   8 ################################################################
   9 # It appears that people try to run tests without building...
  10
  11 if ! test -x ../notmuch
  12 then
  13         echo >&2 'You do not seem to have built notmuch yet.'
  14         exit 1
  15 fi
  16
  17 . ./test-lib.sh
  18
  19 ################################################################
  20 # Test harness
  21 test_expect_success 'success is reported like this' '
  22     :
  23 '
  24 test_set_prereq HAVEIT
  25 haveit=no
  26 test_expect_success HAVEIT 'test runs if prerequisite is satisfied' '
  27     test_have_prereq HAVEIT &&
  28     haveit=yes
  29 '
  30
  31 clean=no
  32 test_expect_success 'tests clean up after themselves' '
  33     test_when_finished clean=yes
  34 '
  35
  36 cleaner=no
  37 test_expect_code 1 'tests clean up even after a failure' '
  38     test_when_finished cleaner=yes &&
  39     (exit 1)
  40 '
  41
  42 if test $clean$cleaner != yesyes
  43 then
  44         say "bug in test framework: cleanup commands do not work reliably"
  45         exit 1
  46 fi
  47
  48 test_expect_code 2 'failure to clean up causes the test to fail' '
  49     test_when_finished "(exit 2)"
  50 '
  51
  52 # Ensure that all tests are being run
  53 test_begin_subtest 'Ensure that all available tests will be run by notmuch-test'
  54 eval $(sed -n -e '/^TESTS="$/,/^"$/p' notmuch-test $TEST_DIRECTORY/notmuch-test)
  55 tests_in_suite=$(for i in $TESTS; do echo $i; done | sort)
  56 available=$(ls -1 $TEST_DIRECTORY/ | \
  57     sed -r -e "/^(aggregate-results.sh|Makefile|Makefile.local|notmuch-test)/d" \
  58            -e "/^(README|test-lib.sh|test-lib.el|test-results|tmp.*|valgrind|corpus*)/d" \
  59            -e "/^(emacs.expected-output|smtp-dummy|smtp-dummy.c|test-verbose|symbol-test.cc)/d" \
  60            -e "/^(test.expected-output|.*~)/d" \
  61            -e "/^(gnupg-secret-key.asc)/d" \
  62            -e "/^(gnupg-secret-key.NOTE)/d" \
  63            | sort)
  64 test_expect_equal "$tests_in_suite" "$available"
  65
  66 EXPECTED=$TEST_DIRECTORY/test.expected-output
  67 suppress_diff_date() {
  68     sed -e 's/\(.*\-\-\- test-verbose\.4\.\expected\).*/\1/' \
  69         -e 's/\(.*\+\+\+ test-verbose\.4\.\output\).*/\1/'
  70 }
  71
  72 test_begin_subtest "Ensure that test output is suppressed unless the test fails"
  73 output=$(cd $TEST_DIRECTORY; ./test-verbose 2>&1 | suppress_diff_date)
  74 expected=$(cat $EXPECTED/test-verbose-no | suppress_diff_date)
  75 test_expect_equal "$output" "$expected"
  76
  77 test_begin_subtest "Ensure that -v does not suppress test output"
  78 output=$(cd $TEST_DIRECTORY; ./test-verbose -v 2>&1 | suppress_diff_date)
  79 expected=$(cat $EXPECTED/test-verbose-yes | suppress_diff_date)
  80 # Do not include the results of test-verbose in totals
  81 rm $TEST_DIRECTORY/test-results/test-verbose-*
  82 rm -r $TEST_DIRECTORY/tmp.test-verbose
  83 test_expect_equal "$output" "$expected"
  84
  85
  86 ################################################################
  87 # Test mail store prepared in test-lib.sh
  88
  89 test_expect_success \
  90     'test that mail store was created' \
  91     'test -d "${MAIL_DIR}"'
  92
  93
  94 find "${MAIL_DIR}" -type f -print >should-be-empty
  95 test_expect_success \
  96     'mail store should be empty' \
  97     'cmp -s /dev/null should-be-empty'
  98
  99 test_expect_success \
 100     'NOTMUCH_CONFIG is set and points to an existing file' \
 101     'test -f "${NOTMUCH_CONFIG}"'
 102
 103 test_expect_success \
 104     'PATH is set to this repository' \
 105     'test "`echo $PATH|cut -f1 -d: | sed -e 's,/test/valgrind/bin$,,'`" = "`dirname ${TEST_DIRECTORY}`"'
 106
 107 test_done